当前时区为 UTC + 8 小时



发表新帖 回复这个主题  [ 7 篇帖子 ] 
作者 内容
1 楼 
 文章标题 : 令人绝望的 python 编码问题
帖子发表于 : 2011-05-09 23:51 
头像

注册: 2007-03-24 23:45
帖子: 2357
送出感谢: 0 次
接收感谢: 9
sqlite3 保存的数据库的编码为 utf-8
python 的 sqlite3 运行的语句字符串必须为 unicode 编码
我由文件解析出来的字符串可能是gtk或者utf-8编码

都知道, 平时都是用utf-8编码
麻痹,现在我生成sql语句是需要 decode('utf-8'), 问题是,那个文本的编码可能是gbk, 强行decode就会出错

有啥办法把任何编码的文本自动转成unicode啊
烦死了
chardet只能作用于缓冲区, 怎么应用于字符串?


页首
 用户资料  
 
2 楼 
 文章标题 : Re: 令人绝望的 python 编码问题
帖子发表于 : 2011-05-10 0:02 
头像

注册: 2007-03-24 23:45
帖子: 2357
送出感谢: 0 次
接收感谢: 9
貌似搞错了, chardet 可以检测编码, 但是这样出错啊
代码:
chardet.detect(u'中文')


页首
 用户资料  
 
3 楼 
 文章标题 : Re: 令人绝望的 python 编码问题
帖子发表于 : 2011-05-10 0:09 
头像

注册: 2009-04-11 23:46
帖子: 4130
系统: Arch Linux
送出感谢: 11
接收感谢: 124
用 Python 3 吧 用 Python 3 吧 用 Python 3 吧!

在写 GAE 程序,90% 的 500 错误都是编码问题引起的,代码里到处充斥着 encode 和 decode,烦死人了!


_________________
我的博客 https://blog.lilydjwg.me/
提问的智慧
Arch Linux 中文论坛

我的vimrc: https://git.io/vimrc


页首
 用户资料  
 
4 楼 
 文章标题 : Re: 令人绝望的 python 编码问题
帖子发表于 : 2011-05-10 0:32 
头像

注册: 2007-03-24 23:45
帖子: 2357
送出感谢: 0 次
接收感谢: 9
只能多加了一个检测分支
效率又下降了一些
没办法, 想要处理多种情况就要有增加开销的觉悟

项目完成之前不考虑python3


页首
 用户资料  
 
5 楼 
 文章标题 : Re: 令人绝望的 python 编码问题
帖子发表于 : 2011-05-10 0:48 
头像

注册: 2009-04-11 23:46
帖子: 4130
系统: Arch Linux
送出感谢: 11
接收感谢: 124
fanhe 写道:
只能多加了一个检测分支
效率又下降了一些
没办法, 想要处理多种情况就要有增加开销的觉悟

项目完成之前不考虑python3


那你就继续忍受各种编码带来的问题和麻烦吧。


_________________
我的博客 https://blog.lilydjwg.me/
提问的智慧
Arch Linux 中文论坛

我的vimrc: https://git.io/vimrc


页首
 用户资料  
 
6 楼 
 文章标题 : Re: 令人绝望的 python 编码问题
帖子发表于 : 2011-05-10 1:14 
头像

注册: 2008-08-28 8:12
帖子: 288
送出感谢: 0 次
接收感谢: 1
codec??
codec.open()


_________________
SLAX and Xorg(without any Window Managers)
It's fun!


页首
 用户资料  
 
7 楼 
 文章标题 : Re: 令人绝望的 python 编码问题
帖子发表于 : 2011-08-23 11:43 

注册: 2010-10-24 11:43
帖子: 239
送出感谢: 0 次
接收感谢: 1
为毛我做网站都不用考虑编码问题?
好像Django可以自动处理编码问题的吧。


页首
 用户资料  
 
显示帖子 :  排序  
发表新帖 回复这个主题  [ 7 篇帖子 ] 

当前时区为 UTC + 8 小时


在线用户

正在浏览此版面的用户:没有注册用户 和 2 位游客


不能 在这个版面发表主题
不能 在这个版面回复主题
不能 在这个版面编辑帖子
不能 在这个版面删除帖子
不能 在这个版面提交附件

前往 :  
本站点为公益性站点,用于推广开源自由软件,由 DiaHosting VPSBudgetVM VPS 提供服务。
我们认为:软件应可免费取得,软件工具在各种语言环境下皆可使用,且不会有任何功能上的差异;
人们应有定制和修改软件的自由,且方式不受限制,只要他们自认为合适。

Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
简体中文语系由 王笑宇 翻译