python python 3.6爬取豆瓣評論編碼報錯,如何解決?
python 3.6爬取豆瓣評論編碼報錯,如何解決?從您描述的問題來看,應(yīng)該是編碼問題原因可能是字符串中有特殊字符,類似微信表情您可以嘗試使用以下方法來解決這個問題,通過轉(zhuǎn)換表將BMP之外的所有內(nèi)容映
python 3.6爬取豆瓣評論編碼報錯,如何解決?
從您描述的問題來看,應(yīng)該是編碼問題
原因可能是字符串中有特殊字符,類似微信表情
您可以嘗試使用以下方法來解決這個問題,通過轉(zhuǎn)換表將BMP之外的所有內(nèi)容映射到替換字符:
import sys
nonBMPumap=從鑰匙聽寫(范圍:0x10000sys.maxunicode系統(tǒng)1) ,0xfffd)
打?。▁.translate(非bmpmap))