我有一个浏览器,它向我的Python服务器发送utf-8字符,但当我从查询字符串中检索它时,Python返回的编码是ASCII。如何将普通字符串转换为utf-8?
注意:从web传递的字符串已经被UTF-8编码,我只是想让Python将其视为UTF-8而不是ASCII。
我有一个浏览器,它向我的Python服务器发送utf-8字符,但当我从查询字符串中检索它时,Python返回的编码是ASCII。如何将普通字符串转换为utf-8?
注意:从web传递的字符串已经被UTF-8编码,我只是想让Python将其视为UTF-8而不是ASCII。
当前回答
你还可以这样做:
from unidecode import unidecode
unidecode(yourStringtoDecode)
其他回答
在Python 2中
>>> plain_string = "Hi!"
>>> unicode_string = u"Hi!"
>>> type(plain_string), type(unicode_string)
(<type 'str'>, <type 'unicode'>)
^这是字节字符串(plain_string)和unicode字符串之间的区别。
>>> s = "Hello!"
>>> u = unicode(s, "utf-8")
^转换为unicode并指定编码。
Python 3
所有字符串都是unicode。unicode函数不再存在。参见@本体的回答
如果我理解正确的话,您的代码中有一个utf-8编码的字节字符串。
将字节字符串转换为unicode字符串称为解码(unicode ->字节字符串是编码)。
可以通过使用unicode函数或decode方法来实现。:
unicodestr = unicode(bytestr, encoding)
unicodestr = unicode(bytestr, "utf-8")
Or:
unicodestr = bytestr.decode(encoding)
unicodestr = bytestr.decode("utf-8")
首先,Python中的str是用Unicode表示的。 其次,UTF-8是将Unicode字符串编码为字节的编码标准。有很多编码标准(例如UTF-16、ASCII、SHIFT-JIS等)。
当客户端使用UTF-8向服务器发送数据时,他们发送的是一堆字节,而不是str。
你收到一个str,因为“库”或“框架”,你正在使用,已经隐式转换一些随机字节到str。
在底层,只有一堆字节。你只需要要求“库”以字节为单位给你请求内容,你将自己处理解码(如果库不能给你,那么它是试图做黑魔法,那么你不应该使用它)。
解码UTF-8编码字节到str: bs.decode(' UTF-8 ') 编码str到UTF-8字节:s.encode(' UTF-8 ')
如果上面的方法不起作用,你也可以告诉Python忽略字符串中不能转换为utf-8的部分:
stringnamehere.decode('utf-8', 'ignore')
city = 'Ribeir\xc3\xa3o Preto'
print city.decode('cp1252').encode('utf-8')