php如何使用URL取得網頁內容

小云云
發布: 2023-03-22 11:16:01
原創
4652 人瀏覽過

PHP中根據url來獲得網頁內容非常的方便,可以透過系統內建函數file_get_contents(),傳入url,即可返回網頁的內容,例如取得百度首頁的內容程式碼為:

<?php  
$html = file_get_contents(&#39;http://www.baidu.com/&#39;);  
  
echo $html;
登入後複製

就可以顯示出百度首頁的內容,但是,這個函數不是萬能的,因為有些伺服器會禁用掉這個函數,或者說這個函數因為沒有傳給伺服器某些必要的參數,而被伺服器拒絕回應,舉個範例:

<?php  
$html = file_get_contents(&#39;http://www.163.com/&#39;);  
  
echo $html;
登入後複製

這個程式碼就不能得到網易的首頁完全的程式​​碼,會回傳如下的頁面,這時我們就需要想其他的辦法了。

這裡我們引進php的cURL 函式庫,可以簡單有效地去抓網頁。你只需要執行一個腳本,然後分析一下你所抓取的網頁,然後就可以以程式的方式得到你想要的資料了。無論是你想從一個連結上取部分數據,或是取一個XML檔案並把其導入資料庫,那怕就是簡單的獲取網頁內容,cURL 是一個功能強大的PHP庫。使用它首先你得在php的設定檔中開啟它,開啟的時候,在windows中可能需要一些dll,這裡就不相信介紹了,查看是否開啟了curl,可以調用phpinfo();來查看,如果開啟了,會在「Loaded Extensions」中顯示。

下面給出使用curl取得網頁程式碼的簡單範例:

<?php  
$ch = curl_init();  
$timeout = 10; // set to zero for no timeout  
curl_setopt ($ch, CURLOPT_URL,&#39;http://www.163.com/&#39;);  
curl_setopt ($ch, CURLOPT_RETURNTRANSFER, 1);   
curl_setopt ($ch, CURLOPT_USERAGENT, &#39;Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/34.0.1847.131 Safari/537.36&#39;);  
curl_setopt ($ch, CURLOPT_CONNECTTIMEOUT, $timeout);  
$html = curl_exec($ch);  
echo $html;
登入後複製

透過這段程式碼就可以輸出網易首頁的內容了,這裡標記紅顏色的程式碼是關鍵,因為他模擬了瀏覽器的agent,這樣伺服器就會以為它是瀏覽器去訪問的,所以給他返回正確的html.

#相關推薦:

php根據URL獲得網頁內容

以上是php如何使用URL取得網頁內容的詳細內容。更多資訊請關注PHP中文網其他相關文章!

相關標籤:
來源:php.cn
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板