如何用php做数据采集 如何用php做数据采集工具

用PHP进行数据采集

1、一般来说，PHP采集数据最简单的办法是使用file_get_content函数，功能更强大的推荐使用cURL函数库。

2、参数可以由js产生并传递url，php后台页面根据URL抓页面。然后ajax通过php，在数据库或者是哪里设一个标量，标明检测到哪里。由于前台的html页面执行多少时候都没问题，这样php的内存限制和执行时间限制就解决了。

3、使用php的file或者file_get_contents函数，获取链接URL的内容。通过php正则表达式，获取你需要的3个字段内容。写入数据库。需要注意的是，百度知道有可能做了防抓取的功能，你刚一抓几个页面，可能会被禁止。

4、strPreg = |]+([^]+)\/td\s*]+([^]+)\/td\s*]+([^]+)\/td|U搞定了才发现你都没悬赏分。。

5、不过看了下百度词典，可以采集，给个参考思路。做一个本地的单词库 php循环一条一条读取词语库 php采集 URL地址：百度词典网址/s？wd=单词，读取html源码php正则匹配内容。数据入库。

相关问答

Q1: 用PHP怎么写采集最近十期的双色球开奖结果到自己的网页显示?

你好，这东西没人会预测。如果真会预测，早就成为亿万富翁如何用php做数据采集了。预测这东西我早就不信了，以前在网站上，经常看别人预测，结果买了，连一个号码都没对上。楼主真要买，就权当是抱着娱乐的心态献爱心吧。

双色球边码表格通常是用于记录每期开奖结果中的红球和蓝球的边码出现情况的。填写方法如下如何用php做数据采集：首先，在表格的左侧列填写红球的号码，一般为01-33的数字。在表格的顶部一行填写蓝球的号码，一般为01-16的数字。

最土的办法，整段采集完后，把和替换为空 ---解决方案--- 试下这个函数，你可以自己修改下。

我一般是不用软件的，直接登陆腾讯的彩票中心，输入哪年的哪期 貌似06年的都能查到的。

Q2: PHP生成和获取XML格式数据

我的思路是，直接使用动态的xml，让flash读取这个文档，这样就不用实时的去生成xml文件了。

什么是 XML？XML 是一种数据存储格式。它没有定义保存什么数据，也没有定义数据的格式。XML 只是定义了标记和这些标记的属性。

？php 使用dom生成xml，注意生成的xml中会没有空格。dom=new DOMDocument(0，utf-8)；path=test.xml // $path 为xml文件的存储路径。

PHP生成XML的方法很多，这里演示最基本，最简单的字符串构造法。就是使用字符串构造或者拼接成xml数据格式，然后输出或者生成xml文件。

header(Content-type：text/xml)；设置好这个后，把xml看错是字符串，直接echo就可以。为了比较准确处理，建议还是用xml读写对象处理比较不容易出错。最后依然是echo 输出字符串。

Q3: 如何用PHP中的curl获取百度地图上的数据

1、一般来说，PHP采集数据最简单的办法是使用file_get_content函数，功能更强大的推荐使用cURL函数库。

2、直接模拟链接获取百度搜索结果达到300多KB，推送到客户端浏览器即使用Gzip压缩也要100KB左右，耗时接近0s。但是百度自己的第一个get内容到浏览器只有30KB左右。怎样才能和百度一样。

3、curl_setopt($ch， CURLOPT_NOBODY，true)； 之后 通过curl_exec函数来获取响应头信息。获取设置 curl_setopt($ch， CURLOPT_NOBODY，false)；然后对curl_exec获取的值通过\r\n\r\n进行分割截取第一部分即为响应头信息。

4、CURLOPT_NETRC 在连接建立以后，访问~/.netrc文件获取用户名和密码信息连接远程站点。 CURLOPT_NOBODY 启用时将不对HTML中的BODY部分进行输出。 CURLOPT_NOPROGRESS 启用时关闭curl传输的进度条，此项的默认设置为启用。

5、一般php采集网络数据会用file_get_contents、file和cURL。不过据说cURL会比file_get_contents、file更快更专业，更适合采集。今天就试试用cURL来获取网页上的所有链接。

6、目前无任何使用限制。请申请key，然后使用该接口。

Q4: 怎样利用php获取数据库中指定的记录

1、就是一个数啊。。他会返回一个结果集，其中就有一个字段 叫count(id)里边就一条数据，就是这个表中的所有数据总数。。

2、http：// 这个网址貌似有你想要的主要功能，php读写excel；其他的功能就是登陆，用户信息存session，根据session用户信息查数据，之后就是数据写入到excel中。

3、/*定义变量dbh，mysql_connect()函数的意思是连接mysql数据库，@的意思是屏蔽报错*/ if(！$dbh){die(error)；} /*die()函数的意思是将括号里的字串送到浏览器并中断PHP程式(Script)。

4、前提条件 ，在数据库这个表中，多加一个字段，字段名称假设为：lasttime， 类型为datetime， 用来记录最后修改时间的。这就需要你在每一个对本表进行修改、插入等程序中加入对这个字段的处理。

关于如何用php做数据采集和如何用php做数据采集工具的介绍到此就结束了，不知道你从中找到你需要的信息了吗 ？如果你还想了解更多这方面的信息，记得收藏关注本站。