php分析大量数据，php数据统计分析

PHP效率问题,上万条数据一次性取出?还是分开取出处理?

php使用的数据库一般是mysql，当数据量大于1000万时，为了效率最好还会进行分表存储。

对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。

建议你读写数据和下载图片分开，各用不同的进程完成。比如说，取数据用get-data.php，下载图片用get-image.php。多进程的话，php可以简单的用pcntl_fork()。这样可以并发多个子进程。

个人建议还是拆分的比较好，一次查询虽然写法上可能会省代码，但是效率就很低下，因为即使加了索引，而在你联合查询 的时候语句写的不当就会导致索引不生效，从而效率就会下降。

这个问题在PHP的官方网站上叫缓冲查询和非缓冲查询(Buffered and Unbuffered queries)。PHP的查询缺省模式是缓冲模式。也就是说，查询数据结果会一次全部提取到内存里供PHP程序处理。

相关问答

Q1: PHP批量输出数据

我的思路是这样：除了数据文本db.txt外，另建一个文本counter.txt用于记录访问的次数n。当第一个用访问时，程序先将counter.txt改为counter.lock，然后将里边n=n+1，再改回原来的名字。并开始访问相应的n*50条记录。

php导出大量数据到Excel，可以通过生成多个Excel文件，然后压缩成压缩包解决。方案是：假如我们数据库有10w条数据，每2000条数据生成一个Excel文件，这样每次只要从数据库里查询出2000条数据即可，一定要分页去查询。

下载phpMyAdmin v2软件后解压放在网站根目录 用root用户和密码登入phpMyAdmin，在左边栏点击要导出的数据库，然后点击要导出的数据表，最后点击导出如图所示。

PHP输出语句的使用很简单，不仅可以输出各种类型的数据，还可以在学习和开发中进行简单的调试。PHP中有一系列的输出语句，其中常见的有 echo、print、print_r()、var_dump()。

php导出数据excel有专门的库，当导出少量数据的时候速度很快，但是当数据量大的时候就会存在服务器内存不够之类的。所以在导出大量数据的时候就应该分页查询数据，避免服务器宕机。

Q2: php对数据进行数据处理?

链接到MySQL数据库在PHP中，可以使用mysqli或PDO扩展来连接到MySQL数据库。

param2 = $_POST[param2]；// 处理POST请求的参数 ？ ``` PUT和DELETE请求：这两种请求方式在PHP中默认情况下没有内置的全局变量来获取数据。可以使用`php：//input`流来获取请求的原始数据，并进行相应的处理。

kc，max(cj) as cj from a group by kc //最低分就直接将max改为min就可 统计大于59分的数量 select count(*) from a where cj59 总数不要where条件就好。

Q3: php处理上百万条的数据库如何提高处理查询速度_MySQL

处理上百万条的数据库如何提高处理查询速度（转） 处理上百万条的数据库如何提高处理查询速度 对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。

应尽量避免在 where 子句中使用！=或操作符，否则将引擎放弃使用索引而进行全表扫描。 对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立索引。

查看建立索引前面的返回的结果。假如没有索引的话，explain会显示返回查询全表的数据自然会很慢了。

Q4: php怎么导出大量数据的Excel

1、php导出大量数据到Excel，可以通过生成多个Excel文件，然后压缩成压缩包解决。方案是：假如我们数据库有10w条数据，每2000条数据生成一个Excel文件，这样每次只要从数据库里查询出2000条数据即可，一定要分页去查询。

2、下载phpMyAdmin v2软件后解压放在网站根目录 用root用户和密码登入phpMyAdmin，在左边栏点击要导出的数据库，然后点击要导出的数据表，最后点击导出如图所示。

3、php导出数据excel有专门的库，当导出少量数据的时候速度很快，但是当数据量大的时候就会存在服务器内存不够之类的。所以在导出大量数据的时候就应该分页查询数据，避免服务器宕机。

4、首先我们准备一个含有数据的Excel表格，表头和数据表中的表字段相对应。在ThinkPHP中引入PHPExcel类库。然后我们编写导入的PHP代码。然后我们编写导出的PHP代码。然后我们进行导出测试发现可以导出即可。

5、实现步骤：一：在http：//phpexcel.codeplex.com/下载最新PHPExcel放到Vendor下，注意位置：ThinkPHP\Extend\Vendor\PHPExcel\PHPExcel.php。

6、php读取csv文件类 php简单ftp文件上传范例 一个php生成zip文件的类 如何将数据从mysql数据库导出成excel格式？是php的？可以右键-》任务-》导出数据--》这时会出现一个导出页面。

Q5: 如何利用php数组对百万数据进行排重

1、首先我们将需要去重的数组打印出来，然后我们可以看到数组有一部分相同的值。 接下来我们在数组下方输入array_unique()函数语言，使用这个函数对数组进行去重处理。

2、在test.php文件内，使用header设置test.php执行的编码为utf8，避免输出中文的时候出现乱码。在test.php文件内，创建一个测试的数组，例如，定义一个分类的数组，其对应的索引值分别为0，4，8。

3、array1 必需。输入的第一个数组。array2 必需。输入的第二个数组。array3 可选。可指定的多个输入数组。

关于php分析大量数据和php数据统计分析的介绍到此就结束了，不知道你从中找到你需要的信息了吗 ？如果你还想了解更多这方面的信息，记得收藏关注本站。