如何解决分隔符冲突

Question

我有一个很大的 .TXT 文件，由“;”分隔。不幸的是我的一些值包含“;”同样，在这种情况下，它不是分隔符，但被 pandas 识别为分隔符。因此，我很难阅读 .txt。文件写入 pandas 中，因为某些行比其他行有更多的列。背景：我试图将多个 .txt 文件合并到 1 个数据帧中，并收到以下错误：ParserError：标记数据时出错。 C 错误：第 443 行中预期有 21 个字段，结果看到了 22 个字段。

因此，在检查第 443 行时，我确实看到该行还有 1 个“;”实例因为它是价值观之一的一部分。

复制：

文本文件 1：

1;2;3;4
23123213;23123213;23123213;23123213
123;123;123;123
123;123;123;123
1;1;1;1
123;123;123;123
12;12;12;12
3;3;3;3

文本文件 2：

1;2;3;4
23123213;23123213;23123213;23123213
123;123;123;123
123;123;12;3;123
1;1;1;1
123;123;123;123
12;12;12;12
3;3;3;3

代码：

import pandas as pd
import glob
import os

path = r'C:\Users\file'
all_files = glob.glob(path + "/*.txt")
li = []
for filename in all_files:
    df = pd.read_csv(filename, index_col=None, header=0, delimiter=';')
    li.append(df)
frame = pd.concat(li, axis=0, ignore_index=True)