亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 編程 > Python > 正文

python中的編碼知識整理匯總

2020-01-04 17:48:24
字體:
來源:轉載
供稿:網友
這篇文章主要介紹了python中的編碼知識整理匯總的相關資料,需要的朋友可以參考下
 

問題

在平時工作中,遇到了這樣的錯誤:

UnicodeDecodeError: 'ascii' codec can't decode byte

想必大家也都碰到過,很常見 。于是決定對python的編碼做一個整理和學習。

基礎知識

在python2.x中,有兩種數據類型,unicode和str,這兩個都是basestring的子類

>>> a = '中'>>> type(a)<type 'str'>>>> isinstance(a,basestring)True>>> a = u'中'>>> type(a)<type 'unicode'>>>> isinstance(a,basestring)True

兩者的區別,概括來講,str是字節串,由unicode經過編碼(encode)后的字節組成的(好比與python3.x的byte);unicode是對象,才是真正意義上的字符串,由字符組成

>>> a='中文'>>> len(a)6>>> repr(a)"'//xe4//xb8//xad//xe6//x96//x87'">>> b=u'中文'>>> len(b)2>>> repr(b)"u'//u4e2d//u6587'"

控制臺和腳本

在linux下的python控制臺執行以下命令,所得的結果和執行腳本是不同的

>>> a = u'中文'>>> repr(a)"u'//xe4//xb8//xad//xe6//x96//x87'">>> b = unicode('中文','utf-8')b)>>> repr(b)"u'//u4e2d//u6587'"

可以看到,u'中文'初始化的對象a不是我們所期望的,那究竟是什么原因呢?
將python看成是一根管子,管子里頭處理的中間過程都是使用unicode的。入口處,全部轉成unicode;出口處,再轉成目標編碼(當然,有例外,處理邏輯中要用到具體編碼的情況)。
在控制臺執行命令a = u'中文',可以將解釋為命令,a = ‘中文'.decode(encode),從而到到unicode對象a。那么這里的encode是什么呢?對于控制臺來說,就是標準輸入,即sys.stdin.encoding

>>> sys.stdin.encoding'ISO-8859-1'

我的這邊控制臺默認的編碼是ISO-8859-1,故a = u'中文' <=> a = '中文'.decode('ISO-8859-1')
這里的'中文'是控制臺理解的,即使根據終端編碼方式編碼后的字節碼,對于utf-8編碼的終端,'中文'='//xe4//xb8//xad//xe6//x96//x87'

>>> a='中文'.decode('ISO-8859-1') >>> repr(a)"u'//xe4//xb8//xad//xe6//x96//x87'"

那如何修改此編碼值呢,設置為什么呢?在linux環境中設置環境變量方法如下,具體設置什么只要與終端編碼方式一直即可

export PYTHONIOENCODING=UTF-8

總結

重新回到最初的那個問題,造成問題的原因是沒有搞清楚unicode和str的區別,將兩者進行了混用。

>>> a = '中文'>>> a.encode('gbk')Traceback (most recent call last): File "<stdin>", line 1, in <module>UnicodeDecodeError: 'ascii' codec can't decode byte 0xe4 in position 0: ordinal not in range(128)

以上的對象a其實是str,即字節碼,若終端是utf-8編碼的話,那么a就是用utf-8 encode的字節碼。a.encode('gbk') 等價于a.decode(encoding).encode('gbk'),即先將字節碼解碼為unicode字符,然后再encode為字節碼。unicode對象作為中轉站。那么這里的encoding是什么呢?

>>> import sys>>> sys.getdefaultencoding()'ascii'

默認是ascii,這正是錯誤為什么報無法用ascii解碼的原因

>>> reload(sys)<module 'sys' (built-in)>>>> sys.setdefaultencoding('utf-8')>>> a = '中文'>>> repr(a)"'//xe4//xb8//xad//xe6//x96//x87'">>> a.encode('gbk')'/xd6/xd0/xce/xc4'

將默認編碼改為utf-8,即可。不鼓勵對str使用encode方法,因為其中隱式對str進行了解碼。decode只對str,encode只對unicode,一切decode/encode都顯示指定編碼方式。


發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
久久久久久久久亚洲| 成人网中文字幕| 国产精品视频地址| 亚洲一二在线观看| 日韩暖暖在线视频| 久久噜噜噜精品国产亚洲综合| 欧洲成人在线观看| 午夜免费久久久久| 日韩在线高清视频| 97超碰色婷婷| 亚洲视频在线播放| 成人伊人精品色xxxx视频| 欧美日韩免费网站| 亚洲成人精品久久久| 欧美激情一二区| 欧美激情乱人伦| 97久久精品人人澡人人爽缅北| 中文日韩在线视频| 亚洲免费伊人电影在线观看av| 欧美另类69精品久久久久9999| 亚洲精品影视在线观看| 欧美黑人国产人伦爽爽爽| 色妞一区二区三区| 欧美精品一二区| 欧美激情a∨在线视频播放| 日韩美女在线观看一区| 亚洲www永久成人夜色| 国产欧美一区二区三区久久人妖| 国产精品手机播放| 国产丝袜精品视频| 亚洲国产精品国自产拍av秋霞| 亚洲最大在线视频| 日本19禁啪啪免费观看www| 久久久国产影院| 91香蕉嫩草影院入口| 久久精品视频在线| 国产成人精品999| 亚洲最新av网址| 国产精品99久久99久久久二8| 亚洲精品91美女久久久久久久| 久久成人精品电影| 亚洲欧洲在线观看| 国产999精品| 黄色一区二区在线观看| 国产精品福利久久久| 国产精品高潮呻吟视频| 久久精品亚洲国产| 欧美日韩精品在线| 91精品国产亚洲| 欧美电影在线播放| 亚洲性av在线| 国产精品欧美一区二区三区奶水| 色综合久久88色综合天天看泰| 欧美日韩在线视频一区二区| 亚洲一区制服诱惑| 亚洲精品国产综合区久久久久久久| 人体精品一二三区| 日韩免费看的电影电视剧大全| 久久精品久久精品亚洲人| 一区三区二区视频| 亚洲人成伊人成综合网久久久| 精品久久久久久亚洲国产300| 尤物tv国产一区| 日韩av资源在线播放| 亚洲激情视频在线播放| 国产精品69精品一区二区三区| www.欧美免费| 国产精品视频久| 久久激情五月丁香伊人| 精品亚洲一区二区三区| 日韩欧美高清在线视频| 欧美黄色片免费观看| 欧美成人午夜激情视频| 日韩电影在线观看中文字幕| 国产日韩欧美夫妻视频在线观看| 精品福利一区二区| 成人精品视频99在线观看免费| 91精品视频免费观看| 91九色视频在线| 日韩一区二区精品视频| 亚洲欧美日韩精品| 一个人看的www欧美| 欧美亚州一区二区三区| 久久久欧美精品| 精品网站999www| 亚洲成人精品视频| 日韩av在线不卡| 成人疯狂猛交xxx| 国产成人一区二区三区小说| 国产日韩欧美视频在线| 久久久久久久久久久网站| 国产国语videosex另类| 日韩av网站电影| 亚洲国产私拍精品国模在线观看| 日韩av中文字幕在线免费观看| 国内精品久久久久久| 欧美精品在线第一页| 亚洲欧美日韩中文在线制服| 最新69国产成人精品视频免费| 国产精品99免视看9| 国产主播在线一区| 欧美大尺度电影在线观看| 成人黄色大片在线免费观看| 555www成人网| 欧美激情精品久久久久久大尺度| 欧美黑人性猛交| 欧美最猛黑人xxxx黑人猛叫黄| 亚洲国产精品久久久| 日韩精品在线观看网站| 午夜精品一区二区三区在线播放| 亚洲电影天堂av| 久久免费国产精品1| 国产精品影片在线观看| 成人免费直播live| 日韩有码在线播放| 日韩av在线影院| 国产伊人精品在线| 色樱桃影院亚洲精品影院| 大量国产精品视频| 亚洲精品videossex少妇| 亚洲欧洲在线看| 亚洲美女在线观看| 欧美大片网站在线观看| 亚洲欧美日韩国产中文专区| 97视频在线观看播放| 欧美精品在线视频观看| 亚洲精品国偷自产在线99热| 成人免费淫片视频软件| 亚洲奶大毛多的老太婆| 大胆人体色综合| 中文字幕亚洲二区| 国产成人精品网站| 久久福利视频网| 国产精品国产三级国产aⅴ浪潮| 亚洲黄页网在线观看| 555www成人网| 国产精品成人av性教育| 日韩电影中文字幕av| 欧美性色xo影院| …久久精品99久久香蕉国产| 亚洲2020天天堂在线观看| 成人激情免费在线| 亚洲视频在线观看网站| 精品中文字幕在线观看| 国产精品电影一区| 91中文精品字幕在线视频| 成人精品一区二区三区| 亚洲人永久免费| 国产网站欧美日韩免费精品在线观看| 欧美激情视频网址| 国产精品美女视频网站| 日韩欧美国产激情| 欧美性xxxx极品hd满灌| 色天天综合狠狠色| 91在线免费观看网站| 亚洲国产精品大全| 欧美视频中文在线看| 91久久国产综合久久91精品网站| 欧美激情伊人电影| 久久激情视频久久| 亚洲欧美日韩第一区| 亚洲精品乱码久久久久久按摩观| 日韩av影院在线观看| 有码中文亚洲精品|