我们使用python中,遇到爬取网站情况,用到unicode编码,我们需要将它转换为中文,unicode编码转换为中文的方法有四种:使用unicode_escape 解码、使用encode()方法转换,再调用bytes.decode()转换为字符串形式、 使用json.loads 解码(为json 格式)、使用eval(遇到Unicode是通过requests在网上爬取的时候)。具体内容请看本文。
方法一:使用unicode_escape 解码
unicode = b'\u4f60\u597d'
re = unicode.decode("unicode_escape")
print(re)
返回:你好
方法二:使用encode()方法转换,再调用bytes.decode()转换为字符串形式
s = r'u4f60u597d'
print(s.encode().decode("unicode_escape"))
方法三: 使用json.loads 解码(为json 格式)
str = 'u4eacu4e1cu653eu517bu7684u722cu866b'
print json.loads('"%s"' %str)
方法四:使用eval(遇到Unicode是通过requests在网上爬取的时候)
response = requests.get(url,headers=headers)
re = eval("u"+"'"+response.text+"'")
print(re)