php大数据文件导出,php大文件读取

PHP导出100万数据到excel

php导出数据excel有专门的库，当导出少量数据的时候速度很快，但是当数据量大的时候就会存在服务器内存不够之类的。

所以在导出大量数据的时候就应该分页查询数据，避免服务器宕机。正好PHP提供了fputcsv函数可以将数据写入到csv文件中。

这样我们就可以使用PHP对数据进行分页查询，再写入到csv文件中。

相关问答

Q1: 如何用php导出导入大数据库

在使用PhpMyAdmin的时候经常用到数据的导入和导出(Export/Import)，但是在导入大数据的时候由于php上传文件的限制和脚本响应时间的限制，导致phpMyAdmin无法导入大数据。很多时候都是由于文件过大，从本地浏览上传导入，容易中断失败，有没有更好的方法呢？

方法：

在phpMyAdmin的目录下，找到根目录的config.inc.php文件，

打开config.inc.php文件，查找$cfg['UploadDir']，这个参数就是设定导入文件存放的目录，这里把值设定为：ImportSQLFile。

在phpMyAdmin目录下，建立以ImportSQLFile命名的文件夹，

把我们需要导入的数据文件，放到ImportSQLFile文件夹下面，非常简单，

登入phpMyAdmin，选择需要导入的数据，点击导航条上面的“导入”按钮，

选中“从网站服务器上传文件夹ImportSQLFile/中选择：”选项，并需要导入的数据文件，

最后点击“执行”，即可导入成功。

注意事项

如果在config.inc.php文件，没有找到$cfg['UploadDir']，可以自己在文件中添加上去即可。

Q2: php怎么导出大量数据的Excel

php导出大量数据到Excel，可以通过生成多个Excel文件，然后压缩成压缩包解决。

方案是：假如我们数据库有10w条数据，每2000条数据生成一个Excel文件，这样每次只要从数据库里查询出2000条数据即可，一定要分页去查询。

原因：主要是数据库性能和写文件性能。分页查询可以解决数据库压力的问题， 生成多个文件可以解决单个文件太大，后期维护Excel文件的问题。

要注意的：

1. 在导出逻辑文件开头，一定要声明 set_time_limit(0) ，防止脚本超时；

2. 每个文件生成后，适当的sleep一下，让程序休息一下下；

3. 因为一次导出最后要将生成的多个Excel文件打包成一个压缩包，所以要删除掉生成的Excel文件，节省服务器存储空间；

下面是我实际工作中，写的一个php导出大量数据到Excel的代码，你可以参考一下：

Q3: php如何导出数据

php导出数据有两种方式，一种是通过封装好的phpexcel导出，一种是通过table导出数据，指定header就可以导出数据。

上面是导出到excel中的方法，当然你也可以导出数据直接到数据库，或者你也可以到处数据到文件中，这个主要看你导出数据的格式要求。

看你截图显示的是数组格式，可以通过循环遍历然后导入到响应的文件中。