当输送Python程序的输出时，Python解释器会混淆编码并将其设置为None。这意味着这样一个程序:
# -*- coding: utf-8 -*-
print u"åäö"
正常运行时工作正常，但失败:
unicode编码错误:'ascii'编解码器无法编码字符u'\xa0'在位置0:序数不在范围(128)
在管道序列中使用时。
什么是最好的方法使这工作时管道?我能告诉它使用shell/文件系统/任何正在使用的编码吗?
到目前为止，我看到的建议是直接修改你的site.py，或者使用以下方法硬编码defaultencoding:
# -*- coding: utf-8 -*-
import sys
reload(sys)
sys.setdefaultencoding('utf-8')
print u"åäö"
有没有更好的方法让管道工作?
当前回答
我可以通过调用来“自动化”它:
def __fix_io_encoding(last_resort_default='UTF-8'):
import sys
if [x for x in (sys.stdin,sys.stdout,sys.stderr) if x.encoding is None] :
import os
defEnc = None
if defEnc is None :
try:
import locale
defEnc = locale.getpreferredencoding()
except: pass
if defEnc is None :
try: defEnc = sys.getfilesystemencoding()
except: pass
if defEnc is None :
try: defEnc = sys.stdin.encoding
except: pass
if defEnc is None :
defEnc = last_resort_default
os.environ['PYTHONIOENCODING'] = os.environ.get("PYTHONIOENCODING",defEnc)
os.execvpe(sys.argv[0],sys.argv,os.environ)
__fix_io_encoding() ; del __fix_io_encoding
是的，如果这个“setenv”失败了，就有可能得到一个无限循环。
其他回答
从Python 3.7开始，我们可以使用Python UTF-8模式，通过使用命令行选项-X utf8:
python -X utf8 testzh.py
脚本testzh.py包含
print("Content-type: text/html; charset=UTF-8\n")
print("地球你好!")
将Windows 10 Internet Service IIS设置为CGI脚本处理程序
我们将Executable设置为:
"C:\Program Files\Python39\python.exe" -X utf8 %s
这适用于微软浏览器上的中文表意文字。像这样的截图:否则，错误发生。
请参阅https://docs.python.org/3/library/os.html#utf8-mode
export PYTHONIOENCODING=utf-8
完成工作，但不能设置在python本身…
我们能做的是验证是否没有设置，并告诉用户在调用脚本之前设置它:
if __name__ == '__main__':
if (sys.stdout.encoding is None):
print >> sys.stderr, "please set python env PYTHONIOENCODING=UTF-8, example: export PYTHONIOENCODING=UTF-8, when write to stdout."
exit(1)
更新以回复评论: 问题只存在于管道到标准输出时。 我在Fedora 25 Python 2.7.13中测试
python --version
Python 2.7.13
猫b.py
#!/usr/bin/env python
#-*- coding: utf-8 -*-
import sys
print sys.stdout.encoding
运行。/ b.py
UTF-8
运行。/b.p y| less
None
克雷格·麦昆(Craig McQueen)的答案有争议的净化版。
import sys, codecs
class EncodedOut:
def __init__(self, enc):
self.enc = enc
self.stdout = sys.stdout
def __enter__(self):
if sys.stdout.encoding is None:
w = codecs.getwriter(self.enc)
sys.stdout = w(sys.stdout)
def __exit__(self, exc_ty, exc_val, tb):
sys.stdout = self.stdout
用法:
with EncodedOut('utf-8'):
print u'ÅÄÖåäö'
我很惊讶这个答案还没有被贴在这里
从Python 3.7开始，你可以用reconfigure()改变标准流的编码: sys.stdout.reconfigure(编码=“utf - 8”) 还可以通过添加errors参数来修改处理编码错误的方式。
https://stackoverflow.com/a/52372390/15675011
我在一个遗留应用程序中遇到了这个问题，并且很难确定在哪里打印了内容。我用这个方法帮助自己:
# encoding_utf8.py
import codecs
import builtins
def print_utf8(text, **kwargs):
print(str(text).encode('utf-8'), **kwargs)
def print_utf8(fn):
def print_fn(*args, **kwargs):
return fn(str(*args).encode('utf-8'), **kwargs)
return print_fn
builtins.print = print_utf8(print)
在我的脚本顶部，test.py:
import encoding_utf8
string = 'Axwell Λ Ingrosso'
print(string)
注意，这改变了所有调用打印使用编码，所以你的控制台将打印这个:
$ python test.py
b'Axwell \xce\x9b Ingrosso'
