本文实例讲述了PHP实现抓取百度搜索结果页面【相关搜索词】并存储到txt文件。分享给大家供大家参考,具体如下:
一、百度搜索关键词【编程之家】
![](https:https://files.jb51.cc/file_images/article/201807/2018711122225720.png?2018611122236)
【编程之家】搜索链接
https://www.baidu.com/s?ie=utf-8&f=8&rsv_bp=0&rsv_idx=1&tn=baidu&wd=%E8%84%9A%E6%9C%AC%E4%B9%8B%E5%AE%B6&rsv_pq=ab33cfeb000086a2&rsv_t=7c65vT3KzHCNfGYOIn%2FDSS%2BOQUiCycaspxWzSOBfkHYpgripKMI74WIi8K8&rqlang=cn&rsv_enter=1&rsv_sug3=1
![](https:https://files.jb51.cc/file_images/article/201807/2018711122208294.png?2018611122222)
搜索结果部分源代码:
搜索
二、抓取并保存本地
![](https:https://files.jb51.cc/file_images/article/201807/2018711122407357.png?2018611122420)
源代码
index.PHP:
rush:
PHP;">
o_String=new StringEx();
}
public function getItem($word){
$url = "http://www.baidu.com/s?wd=".$word;
// 构造包头,模拟浏览器请求
$header = array (
"Host:www.baidu.com","Content-Type:application/x-www-form-urlencoded",//post请求
"Connection: keep-alive",'Referer:http://www.baidu.com','User-Agent: Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; WOW64; Trident/5.0; BIDU
browser 2.6)'
);
$ch = curl_init ();
curl_s
etopt ( $ch,CURLOPT_URL,$url );
curl_s
etopt ( $ch,CURLOPT_HTTPHEADER,$header );
curl_s
etopt ( $ch,CURLOPT_RETURNTRANSFER,1 );
$content = curl_exec ( $ch );
if ($content == FALSE) {
echo "error:" . curl_error ( $ch );
}
curl_close ( $ch );
//
输出结果echo $content;
$this->o_String->string=$content;
$s_begin='
';
$summary=$this->o_String->getPart($s_begin,$s_end);
$s_begin='
搜索
';
$s_end='';
$content=$this->o_String->getPart($s_begin,$s_end);
return $content;
}
public function __destruct(){
unset($this->o_String);
}
}
if($_POST){
$com = new ComBaike();
$q = $_POST['q'];
$str = $com->getItem($q); //获取搜索内容
$pat = '/(.*?)<\/a>/i';
preg_match_all($pat,$str,$m);
//print_r($m[4]); 链接文字
$con = implode(",",$m[4]);
//生成文件夹
$dates = date("Ymd");
$path="./Search/".$dates."/";
if(!is_dir($path)){
mkdir($path,0777,true);
}
//生成文件
$file = fopen($path.iconv("UTF-8","GBK",$q).".txt",'w');
if(fwrite($file,$con)){
echo $con;
echo '';
}else{
echo '';
}
fclose($file);
}
?>
cls.StringEx.php:
string=$string;
}
public function pregGetPart($s_begin,$s_end){
$s_begin==preg_quote($s_begin);
$s_begin=str_replace('/','\/',$s_begin);
$s_end=preg_quote($s_end);
$s_end=str_replace('/',$s_end);
$pattern='/'.$s_begin.'(.*?)'.$s_end.'/';
$result=preg_match($pattern,$this->string,$a_match);
if(!$result){
return $result;
}else{
return isset($a_match[1])?$a_match[1]:'';
}
}
public function strstrGetPart($s_begin,$s_end){
$string=strstr($this->string,$s_begin);
$string=strstr($string,$s_end,true);
$string=str_replace($s_begin,'',$string);
$string=str_replace($s_end,$string);
return $string;
}
public function getPart($s_begin,$s_end){
$result=$this->pregGetPart($s_begin,$s_end);
if(!$result){
$result=$this->strstrGetPart($s_begin,$s_end);
}
return $result;
}
}
?>
更多关于PHP相关内容感兴趣的读者可查看本站专题:《》、《》、《》、《》、《》及《PHP中json格式数据操作技巧汇总
》
希望本文所述对大家PHP程序设计有所帮助。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。
相关推荐
统一支付是JSAPI/NATIVE/APP各种支付场景下生成支付订单,返回预支付订单号的接口,目前微信支付所有场景均使用这一接口。下面介绍的是其中NATIVE的支付实现流程与PC端实现扫码支付流程
统一支付是JSAPI/NATIVE/APP各种支付场景下生成支付订单,返回预支付订单号的接口,目前微信支付所有场景均使用这一接口。下面介绍的是其中APP的支付的配置与实现流程
前言 之前做了微信登录,所以总结一下微信授权登录并获取用户信息这个功能的开发流程。 配置 1.首先得在微信公众平台申请一下微信小程序账号并获取到小程序的AppID和AppSecret https://mp.weixin.qq.com/cgi-bin/loginpage?url=%2Fwxamp%2F
FastAdmin是我第一个接触的后台管理系统框架。FastAdmin是一款开源且免费商用的后台开发框架,它基于ThinkPHP和Bootstrap两大主流技术构建的极速后台开发框架,它有着非常完善且强大的功能和便捷的开发体验,使我逐渐喜欢上了它。
之前公司需要一个内部的通讯软件,就叫我做一个。通讯软件嘛,就离不开通讯了,然后我就想到了长连接。这里本人用的是GatewayWorker框架。
统一支付是JSAPI/NATIVE/APP各种支付场景下生成支付订单,返回预支付订单号的接口,目前微信支付所有场景均使用这一接口。下面介绍的是其中JSAPI的支付实现流程
服务器优化必备:深入了解PHP8底层开发原理
Golang的网络编程:如何快速构建高性能的网络应用?
Golang和其他编程语言的对比:为什么它的开发效率更高?
PHP8底层开发原理揭秘:如何利用新特性创建出色的Web应用
将字符重新排列以形成回文(如果可能)在C++中
掌握PHP8底层开发原理和新特性:创建高效可扩展的应用程序
服务器性能优化必学:掌握PHP8底层开发原理
PHP8新特性和底层开发原理详解:优化应用性能的终极指南
将 C/C++ 代码转换为汇编语言
深入研究PHP8底层开发原理:创建高效可扩展的应用程序
C++程序查找法向量和迹
PHP8底层开发原理实战指南:提升服务器效能
重排数组,使得当 i 为偶数时,arr[i] >= arr[j],当 i 为奇数时,arr[i] <= arr[j],其中 j < i,使用 C++ 语言实现
Golang的垃圾回收:为什么它可以减少开发人员的负担?