正文
php采集100条数据 php爬虫数据采集
提示：扫一扫查出行【扫一扫了解最新限行尾号】
复制提示
PHP mysql 怎么样只保留100条信息
1.每次插入前，你先用count获取当前总条数，最早录入时间，用group by一个语句就可以实现了。
2.当总条数小于100，直接新增。
3.当用条数大于等于100，根据刚才返回的最早录入时间删除此记录，再新增。
相关问答
Q1: thinkphp我按照条件查询了100条数据，然后我现在想只显示这100条按条件查询出的其中某10条？该怎么写查询
limit(offset,length)
查询从offset开始php采集100条数据的一共length条php采集100条数据，limit(10)其实是limit(0,10)，即从0开始共10条数据
Q2: php中foreach循环，出现一个问题，提取数据时总是缺一条数据？总数100条的提出99条来，剩下一条，不见了
同学，你试试这样
$sskkMap = array('商品代码'='A','商品'='B','价格'='C');
$kkssMap = array('aasd'='A','sxfd'='B','dxdx'='C');
$objPHPExcel = new PHPExcel();
$objPHPExcel-getProperties()-setCreator("Maarten Balliauw");
$sql = "select * from CARCAR where '1' LIMIT 0 ,500"; //完成
$lists = $db-select($sql);
$i = 0 ;
foreach($lists as $record){
if($i == 0){ //$i==0,数据首条就出现了。但是表格首行没了
foreach($sskkMap as $k =$col){ //表格首行
$objPHPExcel-setActiveSheetIndex()-setCellValue($col.$i, $k);
}
}
else{
foreach($kkssMap as $k =$col){ //表格第二行起。这里总是缺一条数据没提取出来。。
$objPHPExcel-setActiveSheetIndex()-setCellValue($col.$i, $record[$k]);
}
}
$i++;
}
if(!empty($lists)){
$objPHPExcel-getActiveSheet()-setTitle('Simple');
$objPHPExcel-setActiveSheetIndex(0);
$objWriter = PHPExcel_IOFactory::createWriter($objPHPExcel, 'Excel5');
$objWriter-save('php://output');
}
Q3: 在PHP中如何像一个数据表随机写入100条记录？？数据表是student_info
在php中要随机取mysql记录我们可以直接使用mysql_query来执行mysql中的select rand函数获取的数据并读出来,这里就来给大家简单介绍一下.
方法一,代码如下:
复制代码代码如下:
select * from tablename order by rand() limit 1
把 limit 后面的数值改为你想随机抽取的条数,这里只取一条.
方法二,代码如下:
复制代码代码如下:
$query= "SELECT count(*) as count FROM recommends";
....
$max_num = $row['count']; // 取记录总数
srand((double)microtime()*1000000); // 随机数种子
$se_pos = rand(0, $max_num); // 随机数范围
$length = 6; // 记录条数
if (($max_num - $se_pos) = $length) {
$se_pos = $max_num - $se_pos; // 记录数不足6条的情况
}
$query = "SELECT * FROM recommendsn limit ".$se_pos.",".$length;
例3,假设有一个名为xyj的数据库,库中有表obj,表中有一字段为name,现在要实现从表里随机选取一条记录,具体程序如下:
复制代码代码如下:
?php
$db = mysql_connect("localhost", "root");
mysql_select_db("xyj",$db);
$result=mysql_query("SELECT * FROM obj",$db);
$max_num=mysql_num_rows($result);//取得数据库的记录数
srand((double)microtime()*10000000); //生成随机数种子。
$se_pos=rand(0, $max_num-1); //从0到最大记录数取随机数
$length=30; //设定共取多少条记录
//下面是取出指定数目的记录。
$result_lim=mysql_query("select * from obj limit $se_pos,$length",$db);
$myrow_lim=mysql_fetch_array($result_lim);
printf("%sn", $se_pos);//显示随机得到的记录号
printf("%sn", $myrow_lim["name"]);//显示随机得到的记录的name字段
?
Q4: php curl 大量数据采集
这个需要配合js，打开一个html页面，首先js用ajax请求页面，返回第一个页面信息确定处理完毕（ajax有强制同步功能），ajax再访问第二个页面。（或者根据服务器状况，你可以同时提交几个URL，跑几个相同的页面）
参数可以由js产生并传递url，php后台页面根据URL抓页面。然后ajax通过php，在数据库或者是哪里设一个标量，标明检测到哪里。由于前台的html页面执行多少时候都没问题，这样php的内存限制和执行时间限制就解决了。
因为不会浪费大量的资源用一个页面来跑一个瞬间500次的for循环了。（你的500次for循环死了原因可能是获取的数据太多，大过了php限制的内存）
不过印象中curl好像也有强制同步的选项，就是等待一个抓取后再执行下一步。但是这个500次都是用一个页面线程处理，也就是说肯定会远远大于30秒的默认执行时间。
Q5: 怎么用php采集网站数据
简单的分了几个步骤：
1、确定采集目标
2、获取目标远程页面内容（curl、file_get_contents）
3、分析页面html源码，正则匹配你需要的内容（preg_match、preg_match_all），这一步最为重要，不同页面正则匹配规则不一样
4、入库
php采集100条数据的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于php爬虫数据采集、php采集100条数据的信息别忘了在本站进行查找喔。
