開發(fā)常見問題解答

JAVA框架使用代理響應較慢

檢查代理驗證方式是否為用戶名密碼驗證，JAVA框架如httpclient使用用戶名密碼發(fā)送代理請求會發(fā)送兩次，首次請求信息header不攜帶Proxy-Authorization, 當代理服務器返回407狀態(tài)碼后才會攜帶用戶名密碼信息，導致請求耗時增加。JAVA框架使用代理建議使用IP白名單的方式進行認證。

使用隧道代理動態(tài)版發(fā)現(xiàn)沒有更換IP

出現(xiàn)問題的現(xiàn)象為使用隧道代理動態(tài)版請求發(fā)現(xiàn)個人中心隧道代理使用統(tǒng)計請求次數(shù)很少，與真實請求次數(shù)嚴重不符，并且使用隧道代理動態(tài)版出現(xiàn)沒有更換IP的情況。原因是隧道發(fā)送請求復用了之前建立的連接。需要在header中添加Connection: close。
目前發(fā)現(xiàn)Python的Scrapy、C#的HttpWebRequest和Java的OKHttp,HttpClient可能出現(xiàn)此類現(xiàn)象。

使用不同的代理IP訪問目標網(wǎng)站依然出現(xiàn)驗證碼

部分熱門網(wǎng)站會對客戶端IP采取風控機制來屏蔽非人類真實請求，是一種很正常的反爬蟲策略。對于這樣的網(wǎng)站現(xiàn)在的反爬手段也早已經不是單單靠堆IP數(shù)量就可以解決的。建議合理控制請求頻率并搜集目標網(wǎng)站反爬規(guī)律及解決方法。

使用代理發(fā)POST請求失敗

檢測您的請求中Content-Lengthheader信息是否與POST請求中實體長度一致以及HTTP請求報文格式是否規(guī)范，建議由發(fā)起請求的http客戶端自動添加。

使用代理發(fā)送郵件報錯

首先檢測PROXY_TYPE_HTTP和PROXY_TYPE_SOCKS5對應的端口。部分郵件服務器會檢測發(fā)送郵件的IP以及對郵件內容進行審核。具體原因可以查詢郵件服務器供應商提供的錯誤碼。

API提取頻率為1s10次不夠我使用怎么辦

我們發(fā)現(xiàn)少量用戶在使用Python Scrapy等框架情況下每次請求都會獲取一個代理IP來發(fā)送請求，這樣不僅會增加耗時請求，如果頻率太快還會被API服務器封禁IP。建議用戶在本地程序中或者使用Redis維護一個代理IP池，避免API的高頻調用。

隧道代理不使用域名直接使用IP可以嗎

非常不建議用戶直接使用隧道代理域名解析出來的IP，隧道代理域名對應的服務器可能會動態(tài)調整，調整期間用戶是無感知的。直接使用IP可能會出現(xiàn)隧道代理無法訪問的風險。

我需要固定的提取代理IP的API鏈接如何實現(xiàn)？

固定的API鏈接非常不安全，因鏈接泄露被盜用的風險很高，因此我們非常不推薦使用固定的API鏈接提取代理。
如果您的使用場景確實只能使用固定的API鏈接，在API設置里開啟密鑰明文驗證即可通過將secret_key直接作為簽名參數(shù)實現(xiàn)固定API鏈接。您需要做好承擔由此帶來的API泄露和盜用風險的準備。

帶寬超限是如何判斷的？

當您的請求所需帶寬達到上限后，建立的連接會延遲傳輸；當拿到完整請求延遲達到1s會拒絕。

如何清除DNS緩存？

Windows刷新 DNS 緩存

以管理員身份運行命令提示符輸入以下內容
ipconfig /flushdns

macOS刷新 DNS 緩存

需要打開 Terminal（終端）。你可以通過 Finder（查找器）的 “Applications”（應用程序） -> “Utilities”（實用工具） -> “Terminal”（終端）來找到它。sudo killall -HUP mDNSResponder

Linux系統(tǒng)刷新 DNS 緩存

Ubuntu 上刷新 DNS 緩存

方法1：使用 systemd-resolved 服務

Ubuntu 使用 systemd-resolved 服務來處理 DNS 解析和緩存。要刷新 DNS 緩存，你可以執(zhí)行以下命令：
sudo systemd-resolve --flush-caches
這將清除 systemd-resolved 服務的 DNS 緩存，并使其從頭開始重新解析 DNS。

方法2：重啟 systemd-resolved 服務

另一種方法是重啟 systemd-resolved 服務，這將同時清除緩存并重啟服務。執(zhí)行以下命令：
sudo systemctl restart systemd-resolved

方法3：如果使用 nscd來管理 DNS 緩存。你可以使用以下命令來刷新 DNS 緩存：

sudo systemctl status nscd.service

CentOS 上刷新 DNS 緩存
方法1：使用 NetworkManager 服務
CentOS 使用 NetworkManager 服務來管理網(wǎng)絡連接和 DNS 解析。要刷新 DNS 緩存，可以執(zhí)行以下命令：
sudo systemctl reload NetworkManager
這將重新加載 NetworkManager 服務并清除 DNS 緩存。

方法2：重啟 NetworkManager 服務
另一種方法是通過重啟 NetworkManager 服務來刷新 DNS 緩存。執(zhí)行以下命令：
sudo systemctl restart NetworkManager

方法3：如果使用 nscd來管理 DNS 緩存。你可以使用以下命令來刷新 DNS 緩存：
sudo systemctl restart nscd.service

如何驗證 DNS 緩存是否已經被成功刷新（Linux）

在刷新 DNS 緩存后，你可能想要驗證 DNS 緩存是否已經被成功刷新。你可以使用 dig 命令來檢查 DNS 緩存。
dig 是一個 DNS 查找工具，可以用于查詢 DNS 名稱服務器的信息。你可以使用 dig 命令來查看 DNS 緩存的信息。

安裝

Ubuntu/Debian安裝 apt-get install dnsutils
CentOS/RHEL安裝yum install bind-utils

例如，要查看gzhxgl.cn的DNS信息，您可以運行以下命令：
dig gzhxgl.cn

在命令輸出中，你可以看到 ANSWER SECTION，這部分包含了 DNS 查詢的結果。如果這部分的信息已經更新，那么說明 DNS 緩存已經被成功刷新。

更多常見問題解答會持續(xù)完善，敬請關注...