应《网络安全法》要求，自2017年10月1日起，未进行实名认证将不得使用互联网跟帖服务。为保障您的帐号能够正常使用，请尽快对帐号进行手机号验证，感谢您的理解与支持！

24小时热门版块排行榜    

CyRhmU.jpeg
小木虫论坛-学术科研互动平台 » 计算模拟区 » 程序语言 » Shell&Perl » 一个汉字竟坏了整个程序？
51/1返回列表
查看: 815  |  回复: 4
只看楼主@他人 存档 新回复提醒 (忽略) 收藏    在APP中查看
当前只显示满足指定条件的回帖，点击这里查看本话题的所有回帖

journeyer

铁虫 (正式写手)

[求助] 一个汉字竟坏了整个程序？已有1人参与

最近，用python作字处理程序，发现一个特殊的汉字“䢵”（应该还有其它），当无“䢵”字时程序可以正常运行，但只要有“䢵”，程序就会中断，请论坛里高手指点。
CODE:
# -*- coding: UTF-8 -*-

import codecs, sys

print '-'*60
# 创建gbk编码器
look  = codecs.lookup("gbk")
# 创建utf-8编码器
look2 = codecs.lookup("utf-8")

a = '我爱北京天安门䢵' #去掉“䢵” windows 下运行就正常

print len(a), a
# 把a编码为内部的unicode
b = look2.decode(a)
# 返回的b[0]是数据，b[1]是长度，这个时候的类型是unicode了
print b[1], b[0], type(b[0])
# 把内部编码的unicode转换为gbk编码的字符串，encode方法会返回一个字符串类型
b2 = look.encode(b[0])
# 发现不一样的地方了吧？
print b2[1], b2[0], type(b2[0])
# codecs.encode会统计字数
print len(b2[0])

# 需要说明的是，上述程序在 Windows 下运行时会因“䢵”字存在而出问题，而在 Mac 下运行正常。

[ Last edited by jjdg on 2013-12-25 at 00:16 ]
回复此楼

» 猜你喜欢

» 本主题相关价值贴推荐，对您同样有帮助:
1楼2013-12-24 20:56:23
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

journeyer

铁虫 (正式写手)
引用回帖:
2楼: Originally posted by sunoru at 2014-01-22 16:09:22
额，刚刚在我的电脑上试了一下，因为windows的命令行默认编码是gbk的，所以就算你已经得到了一个正确的unicode字符串，在输出到命令行的时候它还是会被转成gbk，但在gbk中并没有“䢵”这个字，导致会看到出错 ...

其�?，我的程序在Mac下运行没有问题，移到Win下一直没有办法解决，在 gbk 下是可以打出“䢵”字的。
赞一下 回复此楼
4楼2014-02-18 15:15:51
 已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 5 个回答

sunoru

新虫 (初入文坛)

【答案】应助回帖

额，刚刚在我的电脑上试了一下，因为windows的命令行默认编码是gbk的，所以就算你已经得到了一个正确的unicode字符串，在输出到命令行的时候它还是会被转成gbk，但在gbk中并没有“䢵”这个字，导致会看到出错。。

一个解决方法是用不是gbk编码的控制台来运行这个程序，比如我用的是qt版的IPython。

（不知道还帮不帮得上楼主的忙
赞一下 回复此楼
2楼2014-01-22 16:09:22
 已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

garyfirst

木虫 (小有名气)
用python处理汉字还真是不容易呢
赞一下 回复此楼
CL
3楼2014-02-18 08:04:20
 已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

journeyer

铁虫 (正式写手)
引用回帖:
3楼: Originally posted by garyfirst at 2014-02-18 08:04:20
用python处理汉字还真是不容易呢

其实，我在Mac下运行python程序没有问题，python处理字符串还是很方便的。
赞一下 回复此楼
5楼2014-02-18 15:17:52
 已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 5 个回答
普通表情 龙 兔 虎 猫
信息提示
关闭
请填处理意见
关闭