在参数中使用分隔符

pd.read_csv(filename, delimiter=",", encoding='utf-8')

它会读。

我有一个已有行号的数据集，我使用index_col:

pd.read_csv('train.csv', index_col=0)

有时候问题不在于如何使用python，而在于如何处理原始数据。 我得到了这个错误信息

Error tokenizing data. C error: Expected 18 fields in line 72, saw 19.

结果发现，在列描述中有时会有逗号。这意味着需要清理CSV文件或使用另一个分隔符。

对于这个问题，我遇到了多种解决方案。很多人也给出了最好的解释。但对于初学者来说，我认为以下两种方法就足够了:

import pandas as pd

#Method 1

data = pd.read_csv('file1.csv', error_bad_lines=False)
#Note that this will cause the offending lines to be skipped.

#Method 2 using sep

data = pd.read_csv('file1.csv', sep='\t')

大多数有用的答案已经提到了，但是我建议将pandas数据框架保存为parquet文件。Parquet文件没有这个问题，同时它们是内存高效的。

试题:熊猫。read_csv(path, sep = '，'，header=None)