祭出今天的工具-CURL(Client URL Library),當然今天以PHP的方式來使用這件工具。
0. curl是個什麼東西
PHP supports libcurl, a library created by Daniel Stenberg, that allows you to connect and communicate to many different types of servers with many different types of protocols. libcurl currently supports the http, https, ftp, gopher, telnet, dict, file, and ldap protocols. libcurl also supports HTTPS certificates, HTTP POST, HTTP PUT, FTP uploading (this can also be done with PHP's ftp extension), HTTP form based upload, proxies, cookies, and user+password authentication.
這是PHP對於curl的一個解釋,簡單地說就是,curl是一個庫,能讓你通過URL和許多不同種的服務器進行勾搭、搭訕和深入交流,並且也支援許多協議。而且人家還說了curl可以支援https認證、http post、ftp上傳、代理、cookies、簡單口令認證等等功能啦。
說了那麼多其實沒什麼感覺吧,在應用中才有感覺,我起初也是需要在伺服器端向另一個伺服器發起一個POST請求才開始接觸curl的,然後才有了感覺。
在正式講怎麼用之前啊,先提一句,你得先在你的PHP環境中安裝和啟用curl模組,具體方式我就不講了,不同系統不同安裝方式,可以google查一下,或者查閱PHP官方的文檔,還蠻簡單的。
1. 拿來先試試手
工具到手,先要把玩,試試順從手,不然一拿來就用,把你自己的程式碼搞得烏煙瘴氣還怎麼去撩伺服器?
例如我們以著名的「測試網路是否連結」的網站——百度為例,來嘗試下curl
<?php // create curl resource $ch = curl_init(); // set url curl_setopt($ch, CURLOPT_URL, "baidu.com"); //return the transfer as a string curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); // $output contains the output string $output = curl_exec($ch); //echo output echo $output; // close curl resource to free up system resources curl_close($ch); ?>
當你在本地環境瀏覽器打開這個php檔案時,頁面出現的是百度的首頁,特那我剛才輸入的「localhost」呢?
上面的程式碼和註解已經充分說明了這段程式碼在幹啥。
$ch = curl_init(),創建了一個curl會話資源,成功返回一個句柄;
curl_setopt($ch, CURLOPT_URL, "baidu.com"),設定URL,不用說;
上面兩句可以合起來變一句$ch = curl_init("baidu.com");
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 0)這是設定是否將回應結果存入變量,1是存入,0是直接echo出;
$ output = curl_exec($ch)執行,然後將回應結果存入$output變量,供下面echo;
curl_close($ch)關閉這個curl會話資源。
PHP中使用curl大致就是這麼一個形式,其中第二步,透過curl_setopt方法來設定參數是最複雜也是最重要的,有興趣可以去看官方的關於可設定參數的詳細參考,長地讓你看得想吐,還是依需求熟能生巧吧。
小結一下,php中curl用法就是:建立curl會話 -> 設定參數 -> 執行 -> 關閉會話。
下面我們來看一些常用的情景,我們需要如何「打扮自己」(配置參數)才能正確「撩妹」(正確撩到伺服器)。
2. 打個招呼——GET和POST請求以及HTTPS協議處理
先和伺服器打個招呼吧,給伺服器發個Hello看她怎麼回,這裡最方便的方式就是向伺服器發出GET請求,當然POST這種小紙條也OK咯。
2.1 GET請求
我們以「在某著名同性交友網站github中搜尋關鍵字」為例
//通过curl进行GET请求的案例 <?php // create curl resource $ch = curl_init(); // set url curl_setopt($ch, CURLOPT_URL, "https://github.com/search?q=react"); //return the transfer as a string curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); // $output contains the output string $output = curl_exec($ch); //echo output echo $output; // close curl resource to free up system resources curl_close($ch); ?>
好像和之前那個例子沒啥差別,但這裡有2個可以提的點:
2.https請求,非http請求,可能有人在各個地方看到過HTTPS請求需要加幾行代碼繞過SSL證書的檢查等方式來成功請求到資源,但這裡好像不需要,原因是什麼?
The two Curl options are defined as: CURLOPT_SSL_VERIFYPEER - verify the peer's SSL certificate CURLOPT_SSL_VERIFYHOST - verify the certificate's name against host They both default to true in Curl, and shouldn't be disabled unless you've got a good reason. Disabling them is generally only needed if you're sending requests to servers with invalid or self-signed certificates, which is only usually an issue in development. Any publicly-facing site should be presenting a valid certificate, and by disabling these options you're potentially opening yourself up to security issues.
即,除非用了非法或者自製的證書,這大多數出現在開發環境中,你才將這兩行設置為false以避開ssl證書檢查,否者不需要這麼做,這麼做是不安全的做法。
2.2 POST請求
那如何進行POST請求呢?為了測試,先在某個測試伺服器傳了一個接收POST的腳本:
//testRespond.php <?php $phpInput=file_get_contents('php://input'); echo urldecode($phpInput); ?>
發送普通資料
然後在本地寫一個請求:
<?php $data=array( "name" => "Lei", "msg" => "Are you OK?" ); $ch = curl_init(); curl_setopt($ch, CURLOPT_URL, "http://测试服务器的IP马赛克/testRespond.php"); curl_setopt($ch, CURLOPT_POST, 1); //The number of seconds to wait while trying to connect. Use 0 to wait indefinitely. curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 60); curl_setopt($ch, CURLOPT_POSTFIELDS , http_build_query($data)); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); $output = curl_exec($ch); echo $output; curl_close($ch); ?>
瀏覽器運行結果是:
這裡我們是構造了一個數組作為POST資料傳給伺服器:
curl_setopt($ch, CURLOPT_POST, 1)表示是POST請求;
curl_setopt($ch, CURPT_CONNECTTIMEOUT, 6003可設定一個最長的可設定一個最長的可設定一個最長的可設定一個最長的可設定一個最長的可設定一個最長的可設定一個可設定一個最長的可設定一個最長的可設定一個最長的可設定一個最長的可設定一個可設定一個最長的可設定一個最長的可設定一個最長的可設定一個可設定一個最長的可設定一個最長的可設定一個為最長的可設定一個為最60033)。忍受的連接時間,秒為單位,總不能一直等下去變成木乃伊吧;
對於json資料呢,又怎麼進行POST請求呢?
<?php $data='{"name":"Lei","msg":"Are you OK?"}'; $ch = curl_init(); curl_setopt($ch, CURLOPT_URL, "http://测试服务器的IP马赛克/testRespond.php"); curl_setopt($ch, CURLOPT_POST, 1); curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 60); curl_setopt($ch, CURLOPT_HTTPHEADER, array('Content-Type: application/json', 'Content-Length:' . strlen($data))); curl_setopt($ch, CURLOPT_POSTFIELDS , $data); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); $output = curl_exec($ch); echo $output; curl_close($ch); ?>
瀏覽器執行,顯示:
3. 如何上傳和下載檔案
已經和伺服器勾搭上了,這時候得要個照片來看一看了吧,你也得把自己的照片發上去讓人看一看了,雖然兩個人在一起外貌不重要,但是男俊女靚總是最棒的。
3.1 傳一張自己的照片過去表表誠意—— POST上傳文件
🎜同樣遠端伺服器端我們先傳好一個接收腳本,接收圖片並且保存到本地,注意文件和資料夾權限問題,需要有寫入權限:🎜<?php if($_FILES){ $filename = $_FILES['upload']['name']; $tmpname = $_FILES['upload']['tmp_name']; //保存图片到当前脚本所在目录 if(move_uploaded_file($tmpname,dirname(__FILE__).'/'.$filename)){ echo ('上传成功'); } } ?>
然后我们再来写我们本地服务器的php curl部分:
<?php $data = array('name'=>'boy', "upload"=>"@boy.png"); $ch = curl_init(); curl_setopt($ch, CURLOPT_URL, "http://远程服务器地址马赛克/testRespond.php"); curl_setopt($ch, CURLOPT_POST, 1); curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 60); curl_setopt($ch, CURLOPT_POSTFIELDS , $data); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); $output = curl_exec($ch); echo $output; curl_close($ch); ?>
浏览器中运行一下,什么都米有,去看一眼远程的服务器,还是什么都没有,并没有上传成功。
为什么会这样呢?上面的代码应该是大家搜索curl php POST图片最常见的代码,这是因为我现在用的是PHP5.6以上版本,@符号在PHP5.6之后就弃用了,PHP5.3依旧可以用,所以有些同学发现能执行啊,有些发现不能执行,大抵是因为PHP版本的不同,而且curl在这两版本中实现是不兼容的,上面是PHP5.3的实现。
下面来讲PHP5.6及以后的实现,:
<?php $data = array('name'=>'boy', "upload"=>""); $ch = curl_init(); $data['upload']=new CURLFile(realpath(getcwd().'/boy.png')); curl_setopt($ch, CURLOPT_URL, "http://115.29.247.189/test/testRespond.php"); curl_setopt($ch, CURLOPT_POST, 1); curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 60); curl_setopt($ch, CURLOPT_POSTFIELDS , $data); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); $output = curl_exec($ch); echo $output; curl_close($ch); ?>
这里引入了一个CURLFile对象进行实现,关于此的具体可查阅文档进行了解。这时候再去远程服务器目录下看看,发现有了一张图片了,而且确实是我们刚才上传的图片。
3.2 获取远程服务器妹子的照片 —— 抓取图片
服务器妹子也挺实诚的,看了照骗觉得我长得挺慈眉善目的,就大方得拿出了她自己的照片,但是有点害羞的是,她不愿意主动拿过来,得我们自己去取。
远程服务器在她自己的目录下存放了一个图片叫girl.jpg,地址是她的web服务器根目录/girl.jpg,现在我要去获取这张照片。
<?php $ch = curl_init(); $fp=fopen('./girl.jpg', 'w'); curl_setopt($ch, CURLOPT_URL, "http://远程服务器地址马赛克/girl.jpg"); curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 60); curl_setopt($ch, CURLOPT_FILE, $fp); $output = curl_exec($ch); $info = curl_getinfo($ch); fclose($fp); $size = filesize("./girl.jpg"); if ($size != $info['size_download']) { echo "下载的数据不完整,请重新下载"; } else { echo "下载数据完整"; } curl_close($ch); ?>
现在,在我们当前目录下就有了一张刚拿到的照片啦,是不是很激动呢!
这里值得一说的是curl_getinfo方法,这是一个获取本次请求相关信息的方法,对于调试很有帮助,要善用。
4. HTTP认证怎么搞
这个时候呢,服务器的家长说这个我们女儿还太小,不能找对象,就将她女儿关了起来,并且上了一个密码锁,所谓的HTTP认证,服务器呢偷偷托信鸽将HTTP认证的用户名和密码给了你,要你去见她,带她私奔。
那么拿到了用户名和密码,我们怎么通过PHP CURL搞定HTTP认证呢?
PS:这里偷懒就不去搭HTTP认证去试了,直接放一段代码,我们分析下。
function curl_auth($url,$user,$passwd){ $ch = curl_init(); curl_setopt_array($ch, [ CURLOPT_USERPWD => $user.':'.$passwd, CURLOPT_URL => $url, CURLOPT_RETURNTRANSFER => true ]); $result = curl_exec($ch); curl_close($ch); return $result; } $authurl = 'http://要请求HTTP认证的地址'; echo curl_auth($authurl,'vace','passwd');
这里有一个地方比较有意思: curl_setopt_array 这个方法可以通过数组一次性地设置多个参数,防止有些需要多处设置的出现密密麻麻的curl_setopt方法。 5.利用cookie模拟登陆 这时你成功见到了服务器妹子,想带她私奔,但是无奈没有盘缠走不远,服务器妹子说,她妈服务器上有金库,可以登陆上去搞一点下来。 首先我们先来分析一下,这个事情分两步,一是去登陆界面通过账号密码登陆,然后获取cookie,二是去利用cookie模拟登陆到信息页面获取信息,大致的框架是这样的。
<?php //设置post的数据 $post = array ( 'email' => '账户', 'pwd' => '密码' ); //登录地址 $url = "登陆地址"; //设置cookie保存路径 $cookie = dirname(__FILE__) . '/cookie.txt'; //登录后要获取信息的地址 $url2 = "登陆后要获取信息的地址"; //模拟登录 login_post($url, $cookie, $post); //获取登录页的信息 $content = get_content($url2, $cookie); //删除cookie文件 @ unlink($cookie); var_dump($content); ?>
然后我们思考下下面两个方法的实现:
login_post($url, $cookie, $post) get_content($url2, $cookie) //模拟登录 function login_post($url, $cookie, $post) { $curl = curl_init(); curl_setopt($curl, CURLOPT_URL, $url); curl_setopt($curl, CURLOPT_RETURNTRANSFER, 0); curl_setopt($curl, CURLOPT_COOKIEJAR, $cookie); curl_setopt($curl, CURLOPT_POST, 1); curl_setopt($curl, CURLOPT_POSTFIELDS, http_build_query($post)); curl_exec($curl); curl_close($curl); } //登录成功后获取数据 function get_content($url, $cookie) { $ch = curl_init(); curl_setopt($ch, CURLOPT_URL, $url); curl_setopt($ch, CURLOPT_HEADER, 0); curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1); curl_setopt($ch, CURLOPT_COOKIEFILE, $cookie); $rs = curl_exec($ch); curl_close($ch); return $rs; }
至此,总算是模拟登陆成功,一切顺利啦,通过php CURL“撩”服务器就是这么简单。
当然,CURL的能力远不止于此,本文仅希望就后端PHP开发中最常用的几种场景做一个整理和归纳。最后一句话,具体问题具体分析。
更多php使用curl详细解析及问题汇总相关文章请关注PHP中文网!