读取熊猫中CSV文件的所有内容(最后一行除外)

埃莉诺拉

我有熊猫读过的CSV文件:

#!/usr/bin/env python

import pandas as pd
import sys

filename = sys.argv[1]
df = pd.read_csv(filename)

不幸的是,这些文件的最后一行通常已损坏(逗号数量错误)。目前,我在文本编辑器中打开每个文件,然后删除最后一行。

是否可以在加载CSV的同一python / pandas脚本中删除最后一行,以节省必须采取的这一额外的非自动化步骤?

埃德·楚姆

通过error_bad_lines=False,它将自动跳过此行

df = pd.read_csv(filename, error_bad_lines=False)

这样做的好处error_bad_lines是,它会跳过并且不会在任何错误的行上消失,但是如果最后一行始终skipfooter=1Duff,则更好

感谢@DexterMorgan指出,该skipfooter选项强制引擎使用比c引擎解析csv慢的python引擎。

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

显示文本文件中除最后一行之外的所有内容

来自分类Dev

搜索文件中模式的最后一次出现并删除该模式之后的所有内容(模式行除外)

来自分类Dev

读取CSV文件(第一行除外)

来自分类Dev

sed删除许多文件的第一行和最后一行之外的所有内容

来自分类Dev

Vim:删除一行中的所有内容,但数字除外

来自分类Dev

如何使用熊猫在csv文件的最后一行和特定列中插入文本?

来自分类Dev

Rails从关联中获取所有内容,包括最后一行

来自分类Dev

Rails从关联中获取所有内容,包括最后一行

来自分类Dev

Bash读取所有列并从CSV文件显示每一行中的空白单元格

来自分类Dev

无法读取CSV的最后一行

来自分类Dev

获取csv文件第一行和最后一行的内容

来自分类Dev

Python列出最后10个修改的文件并读取所有10个文件的每一行

来自分类Dev

读取文件最后一行的功能?

来自分类Dev

有没有办法检查正在读取的文件行是否是文件中的最后一行?

来自分类Dev

从特定扩展名的所有文件中删除最后一行

来自分类Dev

如何从目录中删除所有文件的最后一行?

来自分类Dev

如何读取.CSV文件的标题行以外的所有内容?

来自分类Dev

spark如何删除csv文件中的最后一行

来自分类Dev

开始显示除文件的最后一行以外的所有内容:命令替换和标准I / O重定向

来自分类Dev

开始显示除文件的最后一行以外的所有内容:命令替换和标准I / O重定向

来自分类Dev

读取并删除txt文件中的第一行(或最后一行),而不进行复制

来自分类Dev

将除第一行和最后一行之外的所有内容读入 bash 中的字符串

来自分类Dev

Python:从数据框的列中删除所有数据,但我们存储在第一行中的最后一个值除外

来自分类Dev

从txt文件读取数据仅读取最后一行

来自分类Dev

StreamReader读取包含以下内容的最后一行

来自分类Dev

StreamReader读取包含以下内容的最后一行

来自分类Dev

读取具有相同扩展名的多个文件的模式中的最后一行的最快方法

来自分类Dev

通过CSVReader读取CSV,但第一行除外

来自分类Dev

使用Asp.net反转tsv / csv文件或仅读取最后一行

Related 相关文章

  1. 1

    显示文本文件中除最后一行之外的所有内容

  2. 2

    搜索文件中模式的最后一次出现并删除该模式之后的所有内容(模式行除外)

  3. 3

    读取CSV文件(第一行除外)

  4. 4

    sed删除许多文件的第一行和最后一行之外的所有内容

  5. 5

    Vim:删除一行中的所有内容,但数字除外

  6. 6

    如何使用熊猫在csv文件的最后一行和特定列中插入文本?

  7. 7

    Rails从关联中获取所有内容,包括最后一行

  8. 8

    Rails从关联中获取所有内容,包括最后一行

  9. 9

    Bash读取所有列并从CSV文件显示每一行中的空白单元格

  10. 10

    无法读取CSV的最后一行

  11. 11

    获取csv文件第一行和最后一行的内容

  12. 12

    Python列出最后10个修改的文件并读取所有10个文件的每一行

  13. 13

    读取文件最后一行的功能?

  14. 14

    有没有办法检查正在读取的文件行是否是文件中的最后一行?

  15. 15

    从特定扩展名的所有文件中删除最后一行

  16. 16

    如何从目录中删除所有文件的最后一行?

  17. 17

    如何读取.CSV文件的标题行以外的所有内容?

  18. 18

    spark如何删除csv文件中的最后一行

  19. 19

    开始显示除文件的最后一行以外的所有内容:命令替换和标准I / O重定向

  20. 20

    开始显示除文件的最后一行以外的所有内容:命令替换和标准I / O重定向

  21. 21

    读取并删除txt文件中的第一行(或最后一行),而不进行复制

  22. 22

    将除第一行和最后一行之外的所有内容读入 bash 中的字符串

  23. 23

    Python:从数据框的列中删除所有数据,但我们存储在第一行中的最后一个值除外

  24. 24

    从txt文件读取数据仅读取最后一行

  25. 25

    StreamReader读取包含以下内容的最后一行

  26. 26

    StreamReader读取包含以下内容的最后一行

  27. 27

    读取具有相同扩展名的多个文件的模式中的最后一行的最快方法

  28. 28

    通过CSVReader读取CSV,但第一行除外

  29. 29

    使用Asp.net反转tsv / csv文件或仅读取最后一行

热门标签

归档