目錄
回复讨论(解决方案)
首頁 後端開發 php教程 如何使用php模拟获取百度搜索结果并和百度一样传送给客户端?

如何使用php模拟获取百度搜索结果并和百度一样传送给客户端?

Jun 23, 2016 pm 01:21 PM

【http://m.baidu.com】【以百度移动端为准,我主要测试这个移动端的】
直接模拟链接获取百度搜索结果达到300多KB,推送到客户端浏览器即使用Gzip压缩也要100KB左右,耗时接近1.0s。但是百度自己的第一个get内容到浏览器只有30KB左右。怎样才能和百度一样。试过PHP几种方式获取百度搜索结果但是其实都一样,样式什么都一起加载过来了。
例如:
$url="http://m.baidu.com /s?word=".$kw;
$html=file_get_contents($url);
//$html > 300KB
//Apache开启网页压缩之后发送到浏览器还有97.8KB


第一个get实际上已经有样式了

但是实际百度自己发送的第一个get只有30.3KB,并且第一个get没有样式


如何才能和百度一样,用最快速度推送到客户端浏览器,样式应该是在浏览器端再自己加载的


回复讨论(解决方案)

问题有点长可能没全读懂
刚刚分析了一下百度移动端网页,如果想把300K压缩到30K,有2个关键点:
1:请求的header中需要添加:Accept-Encoding:gzip, deflate, sdch,这样返回了100K,gzip解码搞定
2:带上访问过百度首页的cookie,这样就变30K了。具体做法是先抓一次cookie然后缓存到文件中,需要查询时把这些cookie都带上。

看着有点似懂非懂。你的具体做法是怎样子的呢?能直接贴代码么?
【我上面的问题的意思就是想嵌套一个内百度在我的页面里,但是抓取过来的搜索结果内容我要自己做二次处理再展示出来的意思,但是这个过程发现很耗时,抓取过来第一次消耗的时间,二次处理的时间【这个可以控制】,推送到页面展示这个时间(这个推送文件发现没办法和百度一样很小)】

问题有点长可能没全读懂
刚刚分析了一下百度移动端网页,如果想把300K压缩到30K,有2个关键点:
1:请求的header中需要添加:Accept-Encoding:gzip, deflate, sdch,这样返回了100K,gzip解码搞定
2:带上访问过百度首页的cookie,这样就变30K了。具体做法是先抓一次cookie然后缓存到文件中,需要查询时把这些cookie都带上。


看着有点似懂非懂。你的具体做法是怎样子的呢?能直接贴代码么?
【我上面的问题的意思就是想嵌套一个内百度在我的页面里,但是抓取过来的搜索结果内容我要自己做二次处理再展示出来的意思,但是这个过程发现很耗时,抓取过来第一次消耗的时间,二次处理的时间【这个可以控制】,推送到页面展示这个时间(这个推送文件发现没办法和百度一样很小)】 
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
2 週前 By 尊渡假赌尊渡假赌尊渡假赌
倉庫:如何復興隊友
4 週前 By 尊渡假赌尊渡假赌尊渡假赌
Hello Kitty Island冒險:如何獲得巨型種子
3 週前 By 尊渡假赌尊渡假赌尊渡假赌

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

11個最佳PHP URL縮短腳本(免費和高級) 11個最佳PHP URL縮短腳本(免費和高級) Mar 03, 2025 am 10:49 AM

11個最佳PHP URL縮短腳本(免費和高級)

Instagram API簡介 Instagram API簡介 Mar 02, 2025 am 09:32 AM

Instagram API簡介

在Laravel中使用Flash會話數據 在Laravel中使用Flash會話數據 Mar 12, 2025 pm 05:08 PM

在Laravel中使用Flash會話數據

構建具有Laravel後端的React應用程序:第2部分,React 構建具有Laravel後端的React應用程序:第2部分,React Mar 04, 2025 am 09:33 AM

構建具有Laravel後端的React應用程序:第2部分,React

簡化的HTTP響應在Laravel測試中模擬了 簡化的HTTP響應在Laravel測試中模擬了 Mar 12, 2025 pm 05:09 PM

簡化的HTTP響應在Laravel測試中模擬了

php中的捲曲:如何在REST API中使用PHP捲曲擴展 php中的捲曲:如何在REST API中使用PHP捲曲擴展 Mar 14, 2025 am 11:42 AM

php中的捲曲:如何在REST API中使用PHP捲曲擴展

在Codecanyon上的12個最佳PHP聊天腳本 在Codecanyon上的12個最佳PHP聊天腳本 Mar 13, 2025 pm 12:08 PM

在Codecanyon上的12個最佳PHP聊天腳本

宣布 2025 年 PHP 形勢調查 宣布 2025 年 PHP 形勢調查 Mar 03, 2025 pm 04:20 PM

宣布 2025 年 PHP 形勢調查

See all articles