Python 如何按照行来分割大文件。

2017-01-01 19:08:20 +08:00
 AlisaDestiny

现在有一个文件有一百多万条数据，按行存储的。 100 多 M ，文本类型的。我想分割成小文件。每个文件 10000 行。想问下各位大神有没有解决办法。或者有代码就更好了。

6552 次点击
所在节点    Python
24 条回复
Miy4mori
2017-01-02 01:32:14 +08:00
兄弟，学学流的概念吧，处理文件要都读内存里全世界都要疯啊
qile1
2017-01-03 04:10:47 +08:00
f 。 readlines()
araraloren
2017-01-03 08:55:38 +08:00
@AlisaDestiny 自带的行读取函数大部分时候够用，大概是类似与 .readlines 之类的函数，我估计会做惰性处理，再说哪个用户会在乎那几百 M 内存。。
kevin8096
2017-01-03 11:08:05 +08:00
awk

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/331596

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX