跳至內容
hiproxy
開始使用

網頁抓取代理

抓取程式會在短時間內向同一網站發送大量請求。HiProxy 無限流量計劃讓每個請求都從不同的家居網絡 IP 發出,並按日收費,不論請求量多少。

為何單一伺服器 IP 會被封鎖?

大部分網站在某個地址的請求超過一定數量後,便會減慢回應或封鎖。抓取程式從一部伺服器發出數千個請求,很快就會越過這條線。

經由閘道,請求會分散到大量來自家居上網連線的 IP(住宅 IP)。總請求量不變,但每個 IP 發出的數量大約與普通訪客相若。

每日多少錢?價格由甚麼決定?

最基本級別(200 個連線,100 Mbps)的 Day 計劃為 $4.75。Week(7 日)每日 $4.47,Month(30 日)$4.04,Quarter(90 日)$3.61,使用期越長,每日價格越低。

數據量不計算。圖片多的頁面和細小的 API 回應都包含在同一每日價格內。只有使用期、連線數及頻寬會影響你的費用。

如何選擇連線數?

計算抓取程式同一時間保持開啟的請求數量。有 150 個工作線程的話,200 個連線的級別已合適,並留有空間重試。

如同時運行多個抓取程式,請把線程數相加。超過 200 的話,500 個連線級別(200 Mbps,每日 $7.77)較合適。下次購買計劃時可轉換級別。

可以收集甚麼?

常見目標是任何人毋須登入即可開啟的頁面:產品列表、新聞文章、公開商業名錄。開始前請閱讀網站條款及你所在地的法律。

HiProxy 會暫停用於以外洩登入資料登入、發送垃圾訊息、DDoS 或存取政府網站的帳戶。把請求分散開來,可讓目標網站保持正常,你的抓取程式也能運行得更久。

為網頁數據爬取連接 HiProxy

  1. 1

    只需用戶名稱和密碼即可註冊,然後在付款視窗用加密貨幣增值最少 $50。

  2. 2

    在無限流量住宅代理下,選擇 Day、Week、Month 或 Quarter,並選擇連線級別。

  3. 3

    在代理用戶名稱加入 -zone-unl;如數據因國家而異,再加入 -cc-us 等國家代碼。

  4. 4

    把抓取程式指向 gate.hiproxy.shop,端口 6100(HTTP)或 6200(SOCKS5),每個請求都會更換 IP。

常見問題

IP 何時會改變?

用戶名稱沒有 -sid 選項時,每個請求都會從新的住宅 IP 發出。

登入後的幾個頁面可以保持同一 IP 嗎?

可以。加入 -sid- 及任何連線階段名稱。名稱相同的請求會共用一個 IP。用 -ttl- 設定保持時間,最長 60 分鐘。

無限流量真的不限流量嗎?

流量不計算。只有開啟的連線數及速度按你所選的級別限制。

我的計劃顯示「啟用中」。

網絡開通前會短暫顯示此狀態。如訂單未能啟用,會被取消,全數金額退回你的餘額。

增值 $50,即可獲得 142 GB 住宅代理流量

選好用戶名稱和密碼即可開始。你的餘額永不過期。