Pandas -附加到现有csv文件问题

Question

使用API进行数据采集，通过如下设置使用pandas.to_csv()函数：

path, mode='a',header=False, index=False'

然而，结果是相当奇怪的。API收集的第一行插入到其他列中，而不是插入到我创建的列中。

如何解决这个问题？

​

Answer 1

在其中写入输出的文件在最后一行的末尾没有换行符(\n)。因此，在该行的末尾添加了以下数据。

下面是一个示例：

with open('/tmp/file.csv', 'w') as f:
    f.write('1,2')
pd.DataFrame([[3,4],[5,6]]).to_csv('/tmp/file.csv', mode='a', header=0, index=False)

输出：

1,23,4
5,6

您需要确保第一次写入时在最后一行的末尾添加一个换行符，或者您可以使用以下命令修复文件：

with open('/tmp/file.csv', 'a') as f:
    f.write('\n')

就在你导出to_csv之前。

输出：

1,2
3,4
5,6

这里有一个更聪明的方法来修复你的文件，它将检查文件的最后一个字符是否为\n，如果不是，将附加一个：

with open('/tmp/file.csv', 'r+') as f: # open file as read/append
    f.seek(0, 2)          # go to end of file
    f.seek(f.tell()-1, 0) # come back one chacacter
    if f.read() != '\n':  # if last character is not \n
        f.write('\n')     # then append \n