我有一个浏览器,它向我的Python服务器发送utf-8字符,但当我从查询字符串中检索它时,Python返回的编码是ASCII。如何将普通字符串转换为utf-8?

注意:从web传递的字符串已经被UTF-8编码,我只是想让Python将其视为UTF-8而不是ASCII。


当前回答

首先,Python中的str是用Unicode表示的。 其次,UTF-8是将Unicode字符串编码为字节的编码标准。有很多编码标准(例如UTF-16、ASCII、SHIFT-JIS等)。

当客户端使用UTF-8向服务器发送数据时,他们发送的是一堆字节,而不是str。

你收到一个str,因为“库”或“框架”,你正在使用,已经隐式转换一些随机字节到str。

在底层,只有一堆字节。你只需要要求“库”以字节为单位给你请求内容,你将自己处理解码(如果库不能给你,那么它是试图做黑魔法,那么你不应该使用它)。

解码UTF-8编码字节到str: bs.decode(' UTF-8 ') 编码str到UTF-8字节:s.encode(' UTF-8 ')

其他回答

如果上面的方法不起作用,你也可以告诉Python忽略字符串中不能转换为utf-8的部分:

stringnamehere.decode('utf-8', 'ignore')
city = 'Ribeir\xc3\xa3o Preto'
print city.decode('cp1252').encode('utf-8')

在.py文件的顶部添加以下一行:

# -*- coding: utf-8 -*-

允许你在脚本中直接编码字符串,就像这样:

utfstr = "ボールト"

是的,你可以添加

# -*- coding: utf-8 -*-

在源代码的第一行。

你可以在这里阅读更多细节https://www.python.org/dev/peps/pep-0263/

url被翻译成ASCII码,而对Python服务器来说,它只是一个Unicode字符串,例如: “T % C3%A9st % C3%A3o”

Python将“é”和“ã”理解为实际的%C3%A9和%C3%A3。

你可以像这样编码URL:

import urllib
url = "T%C3%A9st%C3%A3o"
print(urllib.parse.unquote(url))
>> Téstão

详情见https://www.adamsmith.haus/python/answers/how-to-decode-a-utf-8-url-in-python。