Python:’ascii’编解码器不能编码字符

Python:’ascii’编解码器不能编码字符,第1张

概述我使用以下代码来刮取包含日文字符的网页: import urllib2import bs4import timeurl = 'http://www.city.sapporo.jp/eisei/tiiki/toban.html'pagecontent = urllib2.urlopen(url)soup = bs4.BeautifulSoup(pagecontent.read().de 我使用以下代码来刮取包含日文字符的网页:

import urllib2import bs4import timeurl = 'http://www.city.sapporo.jp/eisei/tiiki/toban.HTML'pagecontent = urllib2.urlopen(url)soup = bs4.BeautifulSoup(pagecontent.read().decode("utf8"))print(soup.prettify())print(soup)

在某些机器中,代码工作正常,最后两个语句成功打印结果.
但是,在某些机器中,最后一个语句会出错

UnicodeEncodeError 'ascii' codec can't encode characters in position 485-496: ordinal not in range(128),

最后一个语句打印所有日文字符的奇怪方块.

为什么两台机器的相同代码工作方式不同?我怎样才能解决这个问题?

Python版本2.6.6

bs4版本:4.1.0

解决方法 您需要正确配置您的环境区域设置;一旦你的语言环境被设置,Python将在打印到终端时自动拾取它.

使用locale命令检查您的语言环境:

$localeLANG="en_GB.UTF-8"LC_ColLATE="en_US.UTF-8"LC_CTYPE="en_US.UTF-8"LC_MESSAGES="en_US.UTF-8"LC_MONETARY="en_US.UTF-8"LC_NUMERIC="en_US.UTF-8"LC_TIME="en_US.UTF-8"LC_ALL="en_US.UTF-8"

请注意我的语言环境设置中的.UTF-8;它告诉终端中运行的程序我的终端使用UTF-8编解码器,支持所有Unicode.

您可以使用LANG环境变量一步设置所有语言环境:

export LANG="en_US.UTF-8"

使用UTF-8编解码器进行美国语言环境(如何打印日期和数字).确切地说,LC_CTYPE设置用于输出编解码器,而输出编解码器默认为LANG值.

另见UTF-8 and Unicode FAQ for Unix/Linux非常全面.

总结

以上是内存溢出为你收集整理的Python:’ascii’编解码器不能编码字符全部内容,希望文章能够帮你解决Python:’ascii’编解码器不能编码字符所遇到的程序开发问题。

如果觉得内存溢出网站内容还不错,欢迎将内存溢出网站推荐给程序员好友。

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/langs/1193258.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-06-03
下一篇 2022-06-03

发表评论

登录后才能评论

评论列表(0条)

保存