python - Pandas read_csv EOF 位于从行开始的字符串内

Question

我遇到了 pandas read_csv 的问题。我有一个文件，其中包含 "作为字段值。实际上，情况不应如此，但我对文件生成没有影响，因此我必须找到解决方法。

pandas.errors.ParserError: Error tokenizing data. C error: EOF inside string starting at line 15345

我在 Git ( link here ) 上发现了一个关于此问题的问题报告，其中他们建议使用用于“sep”参数的分隔符，也用于“quotechar”。在这种情况下，文件结构会变得困惑。

我做的另一件事是为此添加一个异常(exception)，它将运行其余文件的代码，但对于该特定类型的文件，我将继续遇到该问题。

我用来读取 CSV 文件的命令:

df_new = pd.read_csv(file_path_name, sep=";", error_bad_lines=False)

有任何解决方法吗(例如忽略此问题的行)？我猜想的一种方法是使用 csv 库删除该行(或用其他内容替换 ")，但我想保持简单并在 pandas 中尽可能多地执行操作。

Python版本:3.6.2

Pandas 版本:0.21.0

谢谢您并致以诚挚的问候

Answer 1

只想指出@user8505495 的建议有效(再次感谢您)。

基本上只是将参数 quoting=3 添加到 read_csv 中。在 to_csv 中使用相同的参数会导致错误(缺少转义字符)。一种选择是设置 escapechar 参数，或者不使用 quoting 参数。