php如何做大数据 php怎么处理大数据

PHP-大数据量怎么处理优化

使用缓存php如何做大数据，比如memcache，redis，因为它们是在内存中运行，所以处理数据，返回数据非常快，所以可以应对高并发。

1尽量使用数字型字段，若只含数值信息php如何做大数据的字段尽量不要设计为字符型，这会降低查询和连接的性能，并会增加存储开销。这是因为引擎在处理查询和连接时会 逐个比较字符串中每一个字符，而对于数字型而言只需要比较一次就够了。

这样的结果就是PHP程序消耗较少的内存，但却增加了数据库服务器的压力，因为数据库会一直等待PHP来取数据，一直到数据全部取完。很显然，缓冲查询模式适用于小数据量查询，而非缓冲查询适应于大数据量查询。

可以采用MQ，首先将task丢进Q里面，然后给出用户提示，前台页面轮询后台结果。如果数据量过大建议分批处理，拆分成多个task即可。

相关问答

Q1: php怎么导出大量数据的Excel

php导出数据excel有专门的库，当导出少量数据的时候速度很快，但是当数据量大的时候就会存在服务器内存不够之类的。所以在导出大量数据的时候就应该分页查询数据，避免服务器宕机。

php导出大量数据到Excel，可以通过生成多个Excel文件，然后压缩成压缩包解决。方案是：假如我们数据库有10w条数据，每2000条数据生成一个Excel文件，这样每次只要从数据库里查询出2000条数据即可，一定要分页去查询。

write-save(php：//output)；打开页面，刷新的时候会弹出对话框，让你选择文件保存路径和文件名称，我直接放在了桌面上，如图所示；打开表格后，数据和格式跟代码中的一致，说明PHP导出的Excel是正确的。

下载phpMyAdmin v2软件后解压放在网站根目录 用root用户和密码登入phpMyAdmin，在左边栏点击要导出的数据库，然后点击要导出的数据表，最后点击导出如图所示。

一设置浏览器下载Excel需要的Header 打开php：//output流，并设置写入文件句柄。

首先利用PHPExcel实现excel的导入导出功能，然后做一个批处理程序即可，看你运用的php环境，根据不同环境来设置不同批处理命令。

Q2: PHP如何解决网站的大数据大流量与高并发

可以采用数据库缓存、事务缓存等技巧。还可以从架构上把事务做合理的分配，花钱扩充你的硬件设施等。比如，阿里巴巴从最初的1台电脑逐步扩充到过万台电脑了。

从严格意义上来说，这个是属于运维范畴内的知识。不过优化代码终归对高并发和大流量有一定的缓解，需要优化的主要还是数据库的操作内容。

例如，我们在下载PHP源码包的时候，点击下载链接时，为了解决不同国家和地域下载速度的问题，它会返回一个离我们近的下载地址。重定向的HTTP返回码是302 这个重定向非常容易实现，并且可以自定义各种策略。

大数据并发处理解决方案：HTML静态化 效率最高、消耗最小的就是纯静态化的html页面，所以尽可能使网站上的页面采用静态页面来实现，这个最简单的方法其实也是最有效的方法。

Q3: 实时生成并下载大数据量的EXCEL文件,用PHP如何实现?

1、一设置浏览器下载Excel需要的Header 打开php：//output流，并设置写入文件句柄。

2、使用phpstudy搭建一个测试平台，直接访问数据库。下载的phpcms安装包拷贝到IIS目录，开通访问，即可搭建成功。登录网站后台，系统权限，文件目录以及数据库等功能，进行管理。

3、php导出大量数据到Excel，可以通过生成多个Excel文件，然后压缩成压缩包解决。方案是：假如我们数据库有10w条数据，每2000条数据生成一个Excel文件，这样每次只要从数据库里查询出2000条数据即可，一定要分页去查询。

4、前面硬件都过关了，但程序也要加强了，一下上传500M是哪种语言都不能实现的，唯一解决方案，文件切割，如迅雷下载原理一样（采用续点上传），分成若干小块，然后全部上传完毕以后，再进行文件合成。

5、在使用PhpMyAdmin的时候经常用到数据的导入和导出(Export/Import)，但是在导入大数据的时候由于php上传文件的限制和脚本响应时间的限制，导致phpMyAdmin无法导入大数据。

Q4: 如何用php导出导入大数据库

1、方法：在phpMyAdmin的目录下，找到根目录的config.inc.php文件，打开config.inc.php文件，查找$cfg[UploadDir]，这个参数就是设定导入文件存放的目录，这里把值设定为：ImportSQLFile。

2、打开 PHPstudy ，首页找到 mysql 管理器 ，点击 选择 mysql 导入导出 。1 在还原项目里 ，选择 你的数据库所在文件地址 。2 填入数据库名 ，3 导入。

3、以SQL为例。使用PHP MySQL 函数可以编辑数据库。mysql_connect() 函数打开MySQL 连接。

4、一般是单独导入的，在mysql上，要用mysql_import工具 把文本导入 sqlserver上可以用数据库备份工具恢复导入， 也可以使用其他数据库引擎通过ado到。不需要源码，但是需要了解php源码所需要的库表结构。

5、下载phpMyAdmin v2软件后解压放在网站根目录 用root用户和密码登入phpMyAdmin，在左边栏点击要导出的数据库，然后点击要导出的数据表，最后点击导出如图所示。

6、打开任意浏览器，在地址栏中输入：“localhost/phpmyadmin”并点击“Enter”回车键进入下一步。

php如何做大数据的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于php怎么处理大数据、php如何做大数据的信息别忘了在本站进行查找喔。