應對惡劣網路環境,為php-curl設定逾時限制,防止伺服器卡死
挖洋貨這項目,因為沒有公司的名頭,也就無法備案,所以前端機放在阿里雲香港ECS,另配一台阿里雲杭州ECS來跑crontab——執行爬蟲、保存圖片到阿里雲OSS等。最近覺得杭州ECS有點多餘了(原本還有個杭州RDS的,統一搬到香港RDS了),打算撤掉,就把杭州ECS上的crontab全部搬回香港ECS來跑,這下就引發不少問題了。
引發什麼問題了?最核心的問題是香港ECS處在國際網路環境,造訪大陸伺服器時常會出現網路抖動的現象,非常無解。具體來說,例如香港ECS向阿里雲杭州open search
(open search
沒有香港節點呀親╥﹏╥...)查詢的時候,經常報錯;又例如香港ECS抓到圖片後上傳杭州OSS(OSS是有香港節點,問題是沒有圖片處理的服務啊,你們說這不是坑死人嗎),慢是其次,經常卡住一段時間後才報錯,這使得上傳的效率極度低下(我會告訴你就因為這個原因,積壓了好幾千爬回來的商品等著上傳圖片才能上架嗎)。
open search
的問題還是很好解決的,SDK有提供超時的配置,我把超時限制設大了一點(5秒),基本上就不會報錯了。
而OSS的SDK根本沒有提供這方面的配置,為了解決這個問題,我決定深入到這SDK來修改源碼。
OSS的SDK是透過php-curl
來請求api的,經調查後,我發現此SDK有個名為requestcore.class.php
的檔案中定義了一個RequestCore
類,很明顯,這個類別就是負責發送請求的。其中,prep_request()
負責配置curl,send_request($parse = false)
則負責執行curl(即真正發送請求)。
首先來看看prep_request()
,其中包含兩個php-curl
的兩個超時配置:CURLOPT_TIMEOUT
以及CURLOPT_CONNECTTIMEOUTdURL. 0);
curl_setopt($ curl_handle, CURLOPT_CONNECTTIMEOUT, 120);
好理解,就是整個curl請求過程(http request & response)的超時限制,以秒為單位,設定為0則無限制。
CURLOPT_TIMEOUT
CURLOPT_CONNECTTIMEOUT比較難理解,目前確認的是,這是curl請求過程中的一小部分,因此必須要設得比
CURLOPT_TIMEOUT
小,不然CURLOPT_TIMEOUT
無意義。網路上的資料是這麼說的:CURLOPT_CONNECTTIMEOUT 在發起連線前等待的時間,如果設定為0,則無限等待。
這個TCP三次握手發起連接前等待的時間
比較模糊,我傾向於這指的是完成
過程前所耗費的時間,或者換句話說,TCP三次握手
的整個過程必須在CURLOPT_CONNECTTIMEOUT
內完成,否則就超時。 TCP三次握手
無法在指定時間內完成表示伺服器正處於繁忙/奔潰的狀態或網路異常,這正符合本文所提到的場景。 基於這個猜想下,我把
CURLOPT_CONNECTTIMEOUT設成3秒:
curl_setopt($curl_handle, CURLOPT_CONNECTTIMEOUT, 3);
CURLOPT_CONNECTTIMEOUTPS:如果想要設定超時時間少於1秒,需要用到是120秒)才報錯了。
CURLOPT_TIMEOUT_MS,但此配置據鳥哥說有bug,未測試,留個心眼:《Curl的毫秒超時的一個”Bug”》

熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

Video Face Swap
使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱門文章

熱工具

記事本++7.3.1
好用且免費的程式碼編輯器

SublimeText3漢化版
中文版,非常好用

禪工作室 13.0.1
強大的PHP整合開發環境

Dreamweaver CS6
視覺化網頁開發工具

SublimeText3 Mac版
神級程式碼編輯軟體(SublimeText3)

curl和Pythonrequests都是發送HTTP請求的強大工具。雖然curl是一種命令列工具,可讓您直接從終端機發送請求,但Python的請求庫提供了一種更具程式化的方式來從Python程式碼發送請求。將curl轉換為Pythonrequestscurl指令的基本語法如下所示:curl[OPTIONS]URL將curl指令轉換為Python請求時,我們需要將選項和URL轉換為Python程式碼。這是一個範例curlPOST指令:curl-XPOSThttps://example.com/api

PHP8.1發布:引入curl多個請求並發處理近日,PHP官方發布了最新版本的PHP8.1,其中引入了一個重要的特性:curl多個請求並發處理。這個新功能為開發者提供了一個更有效率和靈活的方式來處理多個HTTP請求,大大提升了效能和使用者體驗。在以往的版本中,處理多個請求往往需要透過建立多個curl資源,並使用循環來分別發送和接收資料。這種方式雖然能夠實現目

從頭到尾:如何使用php擴充cURL進行HTTP請求引言:在Web開發中,經常需要與第三方API或其他遠端伺服器進行通訊。而使用cURL進行HTTP請求是一種常見且強大的方式。本文將介紹如何使用php擴充cURL來執行HTTP請求,並提供一些實用的程式碼範例。一、準備工作首先,請確保php已安裝cURL擴充。可以在命令列執行php-m|grepcurl查

在Linux下更新curl版本,您可以按照以下步驟進行操作:檢查目前curl版本:首先,您需要確定目前系統中安裝的curl版本。開啟終端,並執行以下指令:curl--version該指令將顯示目前curl的版本資訊。確認可用的curl版本:在更新curl之前,您需要確定可用的最新版本。您可以造訪curl的官方網站(curl.haxx.se)或相關的軟體來源,尋找最新版本的curl。下載curl原始碼:使用curl或瀏覽器,下載您選擇的curl版本的原始碼檔案(通常為.tar.gz或.tar.bz2

keepalive_timeouthttp有一个keepalive模式,它告诉webserver在处理完一个请求后保持这个tcp连接的打开状态。若接收到来自客户端的其它请求,服务端会利用这个未被关闭的连接,而不需要再建立一个连接。httpkeep-alive,網頁的每一個請求都是http(圖片,css等),而打開http請求是要先建立tcp連接,而如果一個頁面每個請求都要打開及關閉一個tcp連接就會做成資源的浪費.keepalive_timeout就是當一個http請求完成,其tcp連接會存留下

不少的用戶在升級完win11系統後會出現藍色畫面的現象,例如:clockwatchdogtimeout藍屏,那要怎麼解決?用戶可以看看更新驅動程式或是檢查過熱問題等等來進行操作,以下就讓本站來為用戶們來仔細的介紹一下clockwatchdogtimeout藍屏win11解決方法吧。 clockwatchdogtimeout藍色畫面win11解決方法1、更新驅動程式:更新CPU和主機板驅動程式可能解決問題。可以透過造訪製造商的網站下載最新的驅動程式。 2.檢查過熱問題:過熱也可能是導致此錯誤的原因之一

在Vue應用程式開發中,使用vue-resource進行HTTP請求是常見的操作。儘管vue-resource提供了許多方便的功能,但有時我們會遇到「Error:timeoutofxxxmsexceeded」這樣的錯誤提示。這種錯誤通常是因為請求逾時而導致的。那麼,在這種情況下,我們該如何解決這個問題呢? 1.增加請求超時時間首先,我們可以透過增加請

PHPCurl中如何處理網頁的301重定向?使用PHPCurl發送網路請求時,常會遇到網頁回傳的301狀態碼,表示頁面被永久重定向。為了正確處理這種情況,我們需要在Curl請求中加入一些特定的選項和處理邏輯。以下將詳細介紹在PHPCurl中如何處理網頁的301重定向,並提供具體的程式碼範例。 301重定向處理原理301重定向是指伺服器回傳了一個30
