php curl采集远程页面的简单示例

PHP curl采集远程页面内容感兴趣的小伙伴,下面一起跟随编程之家 jb51.cc的小编两巴掌来看看吧!
PHP中可以采集远程页面函数有很多,如有file_get_contents(),fopen,file()这些函数都可采集远程服务器数据,但是要算性能curl最可,他支持支持多线程. 例

/**
 * PHP curl采集远程页面内容
 *
 * @param 
 * @arrange 512-笔记网: www.www.jb51.cc
 **/
$curlPost = 'a=1&b=2';//模拟POST数据
$ch = curl_init();
curl_setopt($ch,CURLOPT_HTTPHEADER,array('X-FORWARDED-FOR:0.0.0.0','CLIENT-IP:0.0.0.0')); //构造IP
curl_setopt($ch,CURLOPT_REFERER,"http://jb51.cc/"); //构造来路 
curl_setopt($ch,CURLOPT_URL,'http://jb51.cc');//需要抓取的页面路径
curl_setopt ($ch,CURLOPT_RETURNTRANSFER,1); 
curl_setopt ($ch,CURLOPT_TIMEOUT,30);
curl_setopt($ch,CURLOPT_POSTFIELDS,$curlPost);//post值
$file_contents = curl_exec($ch);//抓取的内容放在变量中
curl_close($ch)

/***   来自编程之家 jb51.cc(jb51.cc)   ***/
还有一种办法就是使用file_get_contents() 远程文件获取函数,用来获取远程页面内容

注意事项
curl()效率挺高的,支持多线程,不过需要开启下curl扩展。

下面是curl扩展开启的步骤:
1、将PHP文件夹下的三个文件PHP_curl.dll,libeay32.dll,ssleay32.dll复制到system32下;
2、将PHP.ini(c:WINDOWS目录下)中的;extension=PHP_curl.dll中的分号去掉;
3、重启apache或者IIS。
 

相关文章

Hessian开源的远程通讯,采用二进制 RPC的协议,基于 HTTP 传输。可以实现PHP调用Java,Python,C#等多语...
初识Mongodb的一些总结,在Mac Os X下真实搭建mongodb环境,以及分享个Mongodb管理工具,学习期间一些总结...
边看边操作,这样才能记得牢,实践是检验真理的唯一标准.光看不练假把式,光练不看傻把式,边看边练真把式....
在php中,结果输出一共有两种方式:echo和print,下面将对两种方式做一个比较。 echo与print的区别: (...
在安装好wampServer后,一直没有使用phpMyAdmin,今天用了一下,phpMyAdmin显示错误:The mbstring exte...
变量是用于存储数据的容器,与代数相似,可以给变量赋予某个确定的值(例如:$x=3)或者是赋予其它的变...