python 獲取網頁編碼方式實現代碼
<span style="font-family: Arial, Helvetica, sans-serif; background-color: rgb(255, 255, 255);"> </span><span style="font-family: Arial, Helvetica, sans-serif; background-color: rgb(255, 255, 255);">python開發,自動化獲取網頁編碼方式用到了chardet庫,字符集檢測,這個類在python2.7中沒有,需要在官網上下載。這里我下載好了chardet-2.3.0.tar.gz壓縮包文件,只需要將壓縮包文件解壓后的chardet文件放到python安裝包下的python27/lib/site-packages/下,就可以了。</span>
然后import chardet
下面寫了一個自動化檢測的函數供檢測Url連接,然后返回網頁url的編碼方式。
import chardet #字符集檢測 import urllib url="http://www.jd.com" def automatic_detect(url): content=urllib.urlopen(url).read() result=chardet.detect(content) encoding=result['encoding'] return encoding urls=['http://www.baidu.com','http://www.163.com','http://dangdang.com'] for url in urls: print url,automatic_detect(url)
上面用到了chardet類的detect方法,返回字典,然后取出編碼方式encoding
感謝閱讀,希望能幫助到大家,謝謝大家對本站的支持!
新聞熱點
疑難解答