码迷,mamicode.com
首页 > 编程语言 > 详细

python3解码utf-8明文

时间:2020-03-15 14:54:21      阅读:72      评论:0      收藏:0      [点我收藏+]

标签:两种方法   文字   直接   pen   没有   ref   解码   overflow   href   

如果遇到 ‘\\xe4\\xb8\\xad\\xe5\\x9b\\xbd‘ 这样的utf-8明文字符串,并且不是在代码里,而是从别的地方获取的,无法更改,就需要特殊的解码方式

在python2中,可以直接用decode("string_escape")解决,但是python3中str类型无法decode,那么怎么办呢?

有两种方法,第一种来自stackoverflow

https://stackoverflow.com/questions/26311277/evaluate-utf-8-literal-escape-sequences-in-a-string-in-python3


s = r\xe4\xb8\xad\xe5\x9b\xbd c = s.encode().decode(unicode-escape).encode(raw_unicode_escape).decode(utf-8)
print(c)

没错,decode(‘unicode-escape‘)之后,字符串实际上变成了‘\xe4\xb8\xad\xe5\x9b\xbd‘,然后就可以用常规的.encode(‘raw_unicode_escape‘).decode(‘utf-8‘)解决

 

第二种方法来自知乎

python3的编码有哪些坑? - 哈哈哈的回答 - 知乎 https://www.zhihu.com/question/60231684/answer/1076033667

s = r\xe4\xbd\xa0\xe5\xa5\xbd
eval("print(‘"+s+"‘.encode(‘raw_unicode_escape‘).decode(‘utf-8‘))")

#写成函数
def getUtf8Escape(s):
    d = []
    eval("d.append(‘" + s + "‘.encode(‘raw_unicode_escape‘).decode(‘utf-8‘))")
    return d[0]

print(getUtf8Escape(s))

简单粗暴的方法,但确实有效

 

 

顺带一提,如果是Unicode的明文,或者没有\\转义的utf-8,其实很简单

#Unicode明文
a = r‘\u8bf7‘

b = a.encode().decode("unicode_escape")

print(b)

#utf-8
a = ‘\xe4\xbd\xa0\xe5\xa5\xbd‘

b = a.encode(‘raw_unicode_escape‘).decode(‘utf-8‘)

print(b)

python3解码utf-8明文

标签:两种方法   文字   直接   pen   没有   ref   解码   overflow   href   

原文地址:https://www.cnblogs.com/LiuZhongbin888/p/12486978.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!