如何处理大型文本文件？

我有一个包含大约1000万行的文件，大小约为400mb，我的系统无法处理它。当我尝试使用gedit打开文件时，它会卡住。有没有办法处理这样的大数据文件。如何处理大型文本文件？

2010-10-18 Rahul

手柄怎么样？您想做什么？ – 2010-10-18 18:28:15

假设你不想编写程序来做到这一点，这可能会有所帮助：http://stackoverflow.com/questions/159521/text-editor-to-open-big-giant-huge-large-text-文件这属于超级用户吗？ – weiqure 2010-10-18 18:31:13

对于不知道的其他人，1 crore = 10,000,000 – 2010-10-18 18:31:26

使用gnu（Windows上的cygwin）头部，尾部或切割实用程序分割它们。然后在文件部分上工作。

来源

2010-10-18 18:28:49

以及这个文件是从一个工具生成的，我可以测试数据库性能。它基本上是一个csv文件。有没有什么办法可以根据我想要的行数来分割。 – Rahul 2010-10-18 18:42:22

适用于Windows的伟大事业是Large Text Viewer

我能够在尺寸上打开一个文件超过4GB。

来源

2010-10-18 18:56:07 dhirschl

以及我主要在Ubuntu的工作。谢谢。但是vim本身做得很干净。 – Rahul 2010-10-18 19:36:19

那么说在你的问题。 – RyanfaeScotland 2013-11-21 12:59:27

在Windows中完全推荐 – luchosrock 2014-01-28 14:56:27

一个基于web的伟大工具，可以处理大型文件是谷歌优化工具。

你可以找到https://code.google.com/p/google-refine/wiki/FaqAllocateMoreMemory [内存分配详情]

来源

2013-06-19 16:05:55 Raghvendra

OP提到'gedit'，所以他们只想看看文本文件的内容，而不是转换它。 – Raedwald 2013-06-19 16:26:20

如何处理大型文本文件？

回答

相关问题