挖洋貨這項目,因為沒有公司的名頭,也就無法備案,所以前端機放在阿里雲香港ECS,另配一台阿里雲杭州ECS來跑crontab——執行爬蟲、保存圖片到阿里雲OSS等。最近覺得杭州ECS有點多餘了(原本還有個杭州RDS的,統一搬到香港RDS了),打算撤掉,就把杭州ECS上的crontab全部搬回香港ECS來跑,這下就引發不少問題了。
引發什麼問題了?最核心的問題是香港ECS處在國際網路環境,造訪大陸伺服器時常會出現網路抖動的現象,非常無解。具體來說,例如香港ECS向阿里雲杭州open search
(open search
沒有香港節點呀親╥﹏╥...)查詢的時候,經常報錯;又例如香港ECS抓到圖片後上傳杭州OSS(OSS是有香港節點,問題是沒有圖片處理的服務啊,你們說這不是坑死人嗎),慢是其次,經常卡住一段時間後才報錯,這使得上傳的效率極度低下(我會告訴你就因為這個原因,積壓了好幾千爬回來的商品等著上傳圖片才能上架嗎)。
open search
的問題還是很好解決的,SDK有提供超時的配置,我把超時限制設大了一點(5秒),基本上就不會報錯了。
而OSS的SDK根本沒有提供這方面的配置,為了解決這個問題,我決定深入到這SDK來修改源碼。
OSS的SDK是透過php-curl
來請求api的,經調查後,我發現此SDK有個名為requestcore.class.php
的檔案中定義了一個RequestCore
類,很明顯,這個類別就是負責發送請求的。其中,prep_request()
負責配置curl,send_request($parse = false)
則負責執行curl(即真正發送請求)。
首先來看看prep_request()
,其中包含兩個php-curl
的兩個超時配置:CURLOPT_TIMEOUT
以及CURLOPT_CONNECTTIMEOUTdURL. 0);
curl_setopt($ curl_handle, CURLOPT_CONNECTTIMEOUT, 120);
好理解,就是整個curl請求過程(http request & response)的超時限制,以秒為單位,設定為0則無限制。
CURLOPT_TIMEOUT
CURLOPT_CONNECTTIMEOUT比較難理解,目前確認的是,這是curl請求過程中的一小部分,因此必須要設得比
CURLOPT_TIMEOUT
小,不然CURLOPT_TIMEOUT
無意義。網路上的資料是這麼說的:CURLOPT_CONNECTTIMEOUT 在發起連線前等待的時間,如果設定為0,則無限等待。
這個TCP三次握手發起連接前等待的時間
比較模糊,我傾向於這指的是完成
過程前所耗費的時間,或者換句話說,TCP三次握手
的整個過程必須在CURLOPT_CONNECTTIMEOUT
內完成,否則就超時。 TCP三次握手
無法在指定時間內完成表示伺服器正處於繁忙/奔潰的狀態或網路異常,這正符合本文所提到的場景。 基於這個猜想下,我把
CURLOPT_CONNECTTIMEOUT設成3秒:
curl_setopt($curl_handle, CURLOPT_CONNECTTIMEOUT, 3);
CURLOPT_CONNECTTIMEOUTPS:如果想要設定超時時間少於1秒,需要用到是120秒)才報錯了。
CURLOPT_TIMEOUT_MS,但此配置據鳥哥說有bug,未測試,留個心眼:《Curl的毫秒超時的一個”Bug”》

在PHP中,trait適用於需要方法復用但不適合使用繼承的情況。 1)trait允許在類中復用方法,避免多重繼承複雜性。 2)使用trait時需注意方法衝突,可通過insteadof和as關鍵字解決。 3)應避免過度使用trait,保持其單一職責,以優化性能和提高代碼可維護性。

依賴注入容器(DIC)是一種管理和提供對象依賴關係的工具,用於PHP項目中。 DIC的主要好處包括:1.解耦,使組件獨立,代碼易維護和測試;2.靈活性,易替換或修改依賴關係;3.可測試性,方便注入mock對象進行單元測試。

SplFixedArray在PHP中是一種固定大小的數組,適用於需要高性能和低內存使用量的場景。 1)它在創建時需指定大小,避免動態調整帶來的開銷。 2)基於C語言數組,直接操作內存,訪問速度快。 3)適合大規模數據處理和內存敏感環境,但需謹慎使用,因其大小固定。

PHP通過$\_FILES變量處理文件上傳,確保安全性的方法包括:1.檢查上傳錯誤,2.驗證文件類型和大小,3.防止文件覆蓋,4.移動文件到永久存儲位置。

JavaScript中處理空值可以使用NullCoalescingOperator(??)和NullCoalescingAssignmentOperator(??=)。 1.??返回第一個非null或非undefined的操作數。 2.??=將變量賦值為右操作數的值,但前提是該變量為null或undefined。這些操作符簡化了代碼邏輯,提高了可讀性和性能。

CSP重要因為它能防範XSS攻擊和限制資源加載,提升網站安全性。 1.CSP是HTTP響應頭的一部分,通過嚴格策略限制惡意行為。 2.基本用法是只允許從同源加載資源。 3.高級用法可設置更細粒度的策略,如允許特定域名加載腳本和样式。 4.使用Content-Security-Policy-Report-Only頭部可調試和優化CSP策略。

HTTP請求方法包括GET、POST、PUT和DELETE,分別用於獲取、提交、更新和刪除資源。 1.GET方法用於獲取資源,適用於讀取操作。 2.POST方法用於提交數據,常用於創建新資源。 3.PUT方法用於更新資源,適用於完整更新。 4.DELETE方法用於刪除資源,適用於刪除操作。

HTTPS是一種在HTTP基礎上增加安全層的協議,主要通過加密數據保護用戶隱私和數據安全。其工作原理包括TLS握手、證書驗證和加密通信。實現HTTPS時需注意證書管理、性能影響和混合內容問題。


熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

AI Hentai Generator
免費產生 AI 無盡。

熱門文章

熱工具

Safe Exam Browser
Safe Exam Browser是一個安全的瀏覽器環境,安全地進行線上考試。該軟體將任何電腦變成一個安全的工作站。它控制對任何實用工具的訪問,並防止學生使用未經授權的資源。

SublimeText3 Mac版
神級程式碼編輯軟體(SublimeText3)

Atom編輯器mac版下載
最受歡迎的的開源編輯器

SublimeText3 英文版
推薦:為Win版本,支援程式碼提示!

記事本++7.3.1
好用且免費的程式碼編輯器