提取google,baidu等搜索网页内容
在本地上没什么问题,测试结果在附图里.
1. [代码][PHP]代码
<html>
<head>
<title>Search test</title>
</head>
<body>
<p>
<center>
<form method="get" action="index.php" enctype="utf-8">
<input type="text" name="keywords" size="30">
<input type="hidden" name="pn" value="0"/>
<input type="submit" value="Search"><br/>
<input type="radio" name="engine" value="google" />Google
<input type="radio" name="engine" value="baidu"/>Baidu
<input type="radio" name="engine" value="php"/>php
<input type="radio" name="engine" value="mysql"/>mysql
<input type="radio" name="engine" value="java"/>Java
<input type="radio" name="engine" value="html"/>html
</form>
</center>
</p>
<?php
$keywords=$_GET['keywords'];
$pn=$_GET['pn'];
$engine=$_GET['engine'];
if(empty($keywords))
die('Sorry,no keywords.');
//添加$keyword中加号
$keywords=str_replace(' ','+',$keywords);
//支持特殊字符
$keywords=urlencode($keywords);
/**
*切换搜索引擎
*/
if(($engine=='google')||(empty($engine))||($engine=='html')){
header("Content-type:text/html;charset=big5");//加个头
require('google.sty');
//temp variables
//$keywords='google pig';
//$pn=20;
if(($engine=='html')){
$keywords=$keywords.'+site:www.w3schools.com';
}
$url='http://www.google.com.hk/search?q='.$keywords.'&start='.$pn;
//echo $url;
//$contents=file_get_contents($url);
//try fopen() with google
//$fp=fopen($url,'r');
//while(!feof($fp)){
//$contents=$contents.fgets($fp,999);}
//try with curl
$contents=get_data($url);
$start=strpos($contents,'<p id="ires">');
//echo $start.'start<br/>';
$end=strpos($contents,'<p id="foot"');
//echo $end.'end';
$len=$end-$start;
//echo $len.'lenght<br/>';
$inf=substr($contents,$start,$len);
//过滤掉google伪链接,替换搜索链接,尾部链接
$inf=str_replace('/url?q=','',$inf);
$inf=str_replace('search?q=','index.php?engine=google&keywords=',$inf);
//过滤google js带来的无用后缀
//$pattern='&sa=([a-z0-9_\-]){1}&ei=([a-z0-9_\-]){18,22}&ved=([a-z0-9_\-]){9,13}&usg=([a-z0-9_\-]){34}';
$pattern2='&sa=([a-z0-9_\-]){1}&ei=([a-z0-9_\-]){22}&ved=([a-z0-9_\-]){9,13}&usg=([a-z0-9_\-]){34}';
//test regular expression below
$inf=eregi_replace($pattern2,' ',$inf);
//$write='test writing ability';
//file_put_contents('/home/mageia/search_test',$inf);
//替换类似内容链接无法打开链接
$inf=str_replace('/search?','http://www.google.com/search?',$inf);
//替换google对链接的转换
$inf=urldecode($inf);
echo $inf;
$guid='<p id="page"><a href="?keywords='.$keywords.'&pn=0&engine=google">1</a>
<a href="?keywords='.$keywords.'&pn=10&engine=google">2</a>
<a href="?keywords='.$keywords.'&pn=20&engine=google">3</a>
<a href="?keywords='.$keywords.'&pn=30&engine=google">4</a>
<a href="?keywords='.$keywords.'&pn=40&engine=google">5</a>
<a href="?keywords='.$keywords.'&pn=50&engine=google">6</a>
<a href="?keywords='.$keywords.'&pn=60&engine=google">7</a>
<a href="?keywords='.$keywords.'&pn=70&engine=google">8</a>
<a href="?keywords='.$keywords.'&pn=80&engine=google">9</a>
<a href="?keywords='.$keywords.'&pn=90&engine=google">10</a>
<a href="?keywords='.$keywords.'&pn=100&engine=google">11</a>
<a href="?keywords='.$keywords.'&pn=110&engine=google">12</a>
</p>';
//$currentpage当前所在页
$currentpage=$pn/10+1;
$currentpos=strpos($guid,$currentpage.'<');
//$guid为最低下的导航页内容
$guid=substr_replace($guid,'O',$currentpos,($currentpage<10)?1:2);
echo $guid;
}
elseif($engine=='baidu'){
header("Content-type:text/html;charset=utf-8");//加个头
require('baidu.sty');
$url='http://www.baidu.com/s?wd='.$keywords.'&pn='.$pn;
//please check the url
//echo $url;
//$contents=file_get_contents($url);
//try with curl
$contents=get_data($url);
//echo $contents;
$start=strpos($contents,'<p id="container">');
//echo $start.'<br/>';
//real start position
$start=strpos($contents,'</table>',$start);
//real end position
$end=strpos($contents,'<p id="page">',$start);
$len=$end-$start;
//echo $end.'<br/>';
$inf=substr($contents,$start,$len);
//替换一些失效链接
$inf=str_replace('/s?wd=','index.php?engine=baidu&keywords=',$inf);
echo $inf;
$guid='<p id="page"><a href="?keywords='.$keywords.'&pn=0&engine=baidu">1</a>
<a href="?keywords='.$keywords.'&pn=10&engine=baidu">2</a>
<a href="?keywords='.$keywords.'&pn=20&engine=baidu">3</a>
<a href="?keywords='.$keywords.'&pn=30&engine=baidu">4</a>
<a href="?keywords='.$keywords.'&pn=40&engine=baidu">5</a>
<a href="?keywords='.$keywords.'&pn=50&engine=baidu">6</a>
<a href="?keywords='.$keywords.'&pn=60&engine=baidu">7</a>
<a href="?keywords='.$keywords.'&pn=70&engine=baidu">8</a>
<a href="?keywords='.$keywords.'&pn=80&engine=baidu">9</a>
<a href="?keywords='.$keywords.'&pn=90&engine=baidu">10</a>
</p>';
//$currentpage当前所在页
$currentpage=$pn/10+1;
$currentpos=strpos($guid,$currentpage.'<');
//$guid为最低下的导航页内容
$guid=substr_replace($guid,'O',$currentpos,($currentpage<10)?1:2);
echo $guid;
}
elseif($engine=='php'){
/*it will only search php functions within http://www.php.cn/ . If the function name you *give does not exist, it returns nothing but a empty page.
*/
require('php_print.css');
require('php_site.css');
require('php_mirror.css');
$url='http://php.net/search.php?&pattern='.$keywords.'&show=quickref';
//try with file_get_contents,failed remote in us server
$phpcontents=file_get_contents($url);
//try with curl,failed local
//$phpcontents=get_data($url);
//echo $phpcontents;
$start=strpos($phpcontents,'<p id="content"');
//echo $start.'<br/>';
//actual start position
$start+=8;
//echo $start.'<br/>';
$start=strpos($phpcontents,'<p id=',$start);
//echo $start;
$end=strpos($phpcontents,'<p id="footnav">');
$phpinf=substr($phpcontents,$start,$end-$start);
echo $phpinf;
}
elseif(($engine=='mysql')||($engine=='java')){
header("Content-type:text/html;charset=utf-8");//加个头
require('search-core.sty');
require('search.sty');
require('results.sty');
require('grids-ses.sty');
require('tabview-ses.sty');
require('treeview-ses.sty');
//enable page links to work
$pgstart=$pn+1;
$pgend=$start+9;
//url中不能有回车符
if($engine=='mysql'){
$url='http://search.oracle.com/search/search?&q='.$keywords.'&group=MySQL&search_startnum='.$pgstart.'&search_endnum='.$pgend.'&num=10';}
else{
$url='http://search.oracle.com/search/search?search_p_main_operator=all&group=Documentation&q='.$keywords.'+url:/javase'.'&search_startnum='.$pgstart.'&search_endnum='.$pgend.'&num=10';
}
//echo $url;
//$mysqlcontents=file_get_contents($url);
//try with curl
$mysqlcontents=get_data($url);
$start=strpos($mysqlcontents,'<p id="bd">');
$end=strpos($mysqlcontents,'<p id="ft">');
$mysqlinf=substr($mysqlcontents,$start,$end-$start);
echo $mysqlinf;
if($engine=='mysql'){
$guid='<p id="page"><a href="?keywords='.$keywords.'&pn=0&engine=mysql">1</a>
<a href="?keywords='.$keywords.'&pn=10&engine=mysql">2</a>
<a href="?keywords='.$keywords.'&pn=20&engine=mysql">3</a>
<a href="?keywords='.$keywords.'&pn=30&engine=mysql">4</a>
<a href="?keywords='.$keywords.'&pn=40&engine=mysql">5</a>
</p>';
}else{
$guid='<p id="page"><a href="?keywords='.$keywords.'&pn=0&engine=java">1</a>
<a href="?keywords='.$keywords.'&pn=10&engine=java">2</a>
<a href="?keywords='.$keywords.'&pn=20&engine=java">3</a>
<a href="?keywords='.$keywords.'&pn=30&engine=java">4</a>
<a href="?keywords='.$keywords.'&pn=40&engine=java">5</a>
</p>';
}
$currentpage=$pn/10+1;
$currentpos=strpos($guid,$currentpage.'<');
//$guid为最低下的导航页内容
$guid=substr_replace($guid,'O',$currentpos,($currentpage<10)?1:2);
echo $guid;
}
else{
echo 'Sorry,This search engine will be supported soon.';
}
/* gets the data from a URL */
function get_data($url)
{
$ch = curl_init();
$timeout = 5;
curl_setopt($ch,CURLOPT_URL,$url);
curl_setopt($ch,CURLOPT_RETURNTRANSFER,1);
curl_setopt($ch,CURLOPT_CONNECTTIMEOUT,$timeout);
$data = curl_exec($ch);
curl_close($ch);
return $data;
}
?>
</body>
</html>ログイン後にコピー
2. [图片]屏幕截图.png
3. [图片] 屏幕截图.png
4. [图片] 屏幕截图.png
5. [图片] 屏幕截图.png
6. 屏幕截图.png
7. [图片] 屏幕截图.png
8. [文件] css.zip
このウェブサイトの声明
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。
ホットAIツール
Undresser.AI Undress
リアルなヌード写真を作成する AI 搭載アプリ
AI Clothes Remover
写真から衣服を削除するオンライン AI ツール。
Undress AI Tool
脱衣画像を無料で
Clothoff.io
AI衣類リムーバー
Video Face Swap
完全無料の AI 顔交換ツールを使用して、あらゆるビデオの顔を簡単に交換できます。
人気の記事
アサシンのクリードシャドウズ：シーシェルリドルソリューション
3週間前
By DDD
Windows11 KB5054979の新しいものと更新の問題を修正する方法
2週間前
By DDD
Atomfallのクレーンコントロールキーカードを見つける場所
3週間前
By DDD
アサシンクリードシャドウ - 鍛冶屋を見つけて武器と鎧のカスタマイズを解除する方法
1 か月前
By DDD
<🎜>：Dead Rails-すべての課題を完了する方法
3週間前
By DDD
ホットツール
メモ帳++7.3.1
使いやすく無料のコードエディター
SublimeText3 中国語版
中国語版、とても使いやすい
ゼンドスタジオ 13.0.1
強力な PHP 統合開発環境
ドリームウィーバー CS6
ビジュアル Web 開発ツール
SublimeText3 Mac版
神レベルのコード編集ソフト（SublimeText3）
ホットトピック
Gmailメールのログイン入り口はどこですか？
7629
15
7629
15
CakePHP チュートリアル
1389
52
1389
52
Steamのアカウント名の形式は何ですか
89
11
89
11
NYTの接続はヒントと回答です
31
141
31
141