[請益] curl網頁怎樣防止被擋?

作者: jami520 (我的生命因你而發光)   2015-07-27 08:47:36
是否利用sleep(5)像這樣在迴圈內設定秒數做延遲就可以了嗎?
還是有怎樣的方法會比較合適呢? 謝謝
作者: shadowjohn (轉角遇到愛)   2015-07-27 09:11:00
設proxy、動態refer、不同ip不同機器代抓?
作者: mmis1000 (秋月戀楓)   2015-07-28 02:18:00
proxy的方式應該可以?身邊看過有人這樣用
作者: shadowjohn (轉角遇到愛)   2015-07-28 08:16:00
找proxy4free,偶爾還是有幾個站台可以用XD
作者: jami520 (我的生命因你而發光)   2015-07-31 07:58:00
http://fhkkta.blogspot.tw/2008/07/php-curl-proxy.html像上面那篇文章這寫撰寫就可以避免被擋嗎? 還是要再加上sleep(秒數)再跑每個curl的迴圈上面呢?
作者: shadowjohn (轉角遇到愛)   2015-07-31 08:37:00
proxy照道理應該多找幾個可以用的站台,輪著用~
作者: marcoyan (日本滑雪募集中)   2015-08-05 12:34:00
如果會因連線太多被檔的我都是用pppoe連線抓完斷線這樣可避免同一個ip一直在抓資料 分散一點

Links booklink

Contact Us: admin [ a t ] ucptt.com