PHP 下有啥东西能解决对大 xls、xlsx 文件的写入问题的吗

2016-11-16 09:39:18 +08:00
 abcbuzhiming
现在有个需求,必须输出 xls 或 xlsx 因为 csv 没有样式。
PHPexcel 这个东西的最大弱点,在于它写入一个 excel 文件之前,必须把这个文件读入内存,不能像写文本那样,简单的续写就行了,则就导致这玩意处理不了大文件,当一个文件本身就很大的时候,载入就要花很长时间。因为内容的列非常多,而且样式复杂,所以大约在 10000 行的时候内存就要爆炸。爆炸还是其次,关键是分批写入随着文件越来越大会变得越来越慢
4064 次点击
所在节点    PHP
16 条回复
knightdf
2016-11-16 09:46:25 +08:00
头像不错
R18
2016-11-16 09:48:43 +08:00
我记得可以设置缓存区
setonfocus
2016-11-16 09:49:14 +08:00
这个需求不应该用 php 来解决吧
demoxu
2016-11-16 09:52:30 +08:00
phpexcel 我记得能设置硬盘缓存来替代默认的内存缓存;然而好久不用,不知道设置了。上 github 找找吧
shoaly
2016-11-16 10:06:08 +08:00
可以折中一下, 用 php 写入到数据库, 另外找个 python 从数据库读取 写到 excel 里面去
abcbuzhiming
2016-11-16 10:08:51 +08:00
@R18 如何设置呢,缓存区的原理是啥
fzxml
2016-11-16 10:13:21 +08:00
用 python 吧
saymoon
2016-11-16 10:13:33 +08:00
oisc
2016-11-16 10:17:18 +08:00
可以通过 Excel Driver 用 ODBC 的方式读写 xls 、 xlsx 文件,不过你需要 专门一台 Windows 来做 ODBC 源。
mhycy
2016-11-16 10:30:27 +08:00
XLS 是结构化数据,在对象生成的过程中必定需要耗费大量的内存存放数据,最后再输出成 XLS 文件
建议加内存,能简单用硬件解决的问题不应增加程序复杂度
Arnie97
2016-11-16 10:35:55 +08:00
如果 Excel 本身不存在这个问题,你可以装个 Excel ,然后通过 COM / ODBC 之类调用。
yasin
2016-11-16 15:27:08 +08:00
没什么好的办法,我们后来改成 nodejs 处理这种任务。 6 万条数据 10 秒内导出。
lygmqkl
2016-11-16 23:18:37 +08:00
phpcli 或者 python 异步完成即可
cenxun
2016-11-17 11:02:30 +08:00
可以试试这个 https://github.com/mk-j/PHP_XLSXWriter ,比 phpexcel 要好点,官方测评截图 , 地址 http://www.zedwood.com/article/php-excel-writer-performance-comparison
crossmaya
2016-11-17 13:41:44 +08:00
可以设置内存缓冲区,使用硬盘,但是速度尼玛贼慢!我现在是 php 生成 json 文件然后使用 python 来做。
Patrick95
2016-11-18 13:45:01 +08:00
PHPExcel_CachedObjectStorageFactory::cache_to_discISAM;

缓存到磁盘。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/320834

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX