python編碼格式導(dǎo)致csv讀取錯誤問題csv.reader,pandas.csv

第python編碼格式導(dǎo)致csv讀取錯誤問題(csv.reader,pandas.csv目錄python編碼格式導(dǎo)致csv讀取錯誤pandas讀取csv常見錯誤及解決1）第一種錯誤2）第二種錯誤

python編碼格式導(dǎo)致csv讀取錯誤

本文記錄python小白我今天遇到的這兩個問題（csv.reader和pandas.csv_read）：

pandas模塊CParserError:Errortokenizingdata.Cerror:Expected1fieldsinline4,saw2錯誤

csv模塊linecontainsNULLbyte錯誤

今天處理數(shù)據(jù)時疏忽了，而且還偷懶把數(shù)據(jù)復(fù)制到xlsx保存后，直接修改文件后綴成.csv準(zhǔn)備用來讀取。之后運(yùn)行算法要讀數(shù)據(jù)的時候果然問題來了。

importpandasaspd

path='water30.csv'

df=pd.read_csv(path)

注：后兩行可寫作df=pd.read_csv(water30.csv)。

但由于read_csv本身有好多參數(shù)（雖然這里不用）,故寫成path習(xí)慣好些。

這樣會報錯CParserError:Errortokenizingdata.Cerror:Expected1fieldsinline4,saw2

我在網(wǎng)上查了好多種解決辦法，由于read_csv的參數(shù)很多，所以各有其詞，我這里遇到的應(yīng)該也只是其中一種，久尋無果。直到我看到這里說看了模塊_csv.c的代碼后，發(fā)現(xiàn)文件里不能有\(zhòng)0,所以csv文件不可以是unicode編碼的，可以是ANSI。

針對我直接改后綴名的結(jié)果是，點擊那個.csv打開時就已經(jīng)提示我：

也就是這里改后綴并沒有把文件格式弄好。所以我選擇另存為改選了文件格式為

之后，讀取就不會報錯了。

注：有個疑問沒有解決，就是那個我直接改后綴得到的那個.csv我用記事本打開查看了一下，編碼就是ANSI啊。那我就不知道為什么報錯了不過問題倒是暫時解決了。

現(xiàn)在讀取到的格式為

是個結(jié)構(gòu)體。

另外，對于：csv模塊linecontainsNULLbyte錯誤。和上面出現(xiàn)問題原因和解決方案是一樣的，比如

importcsv

csvfile=file('water30.csv','rb')

reader=csv.reader(csvfile)

forlineinreader:

printline

csvfile.close()

報錯：Error:linecontainsNULLbyte

修正后，讀入的數(shù)據(jù)格式為list，如下

[1,2,2,1,2]

[1,1,1,2,2]

[1,2,1,1,1]

[1,1,1,1,2]

[1,1,1,2,2]

[1,1,1,2,2]

[0.697,0.744,0.634,0.403,0.481]

[0.46,0.376,0.264,0.237,0.149]

[1,1,1,1,1]

pandas讀取csv常見錯誤及解決

1）第一種錯誤

錯誤提示：

pandas.errors.ParserError:Errortokenizingdata.Cerror:Expected1fieldsinline121,saw2

解決方法：

importpandasaspd

data=pd.read_csv(inputfile,encoding='utf-8',header=None,sep='\t')

2）第二種錯誤

錯誤提示：

pandas.errors.ParserError:Errortokenizingdata.Cerror:EOFinsidestringstartingatline15945

解決方法：

importpandasaspd

importcsv