[問題] 證交所歷史股價 無法自動下載

作者: CaptPlanet (ep)   2018-04-18 16:20:18
以前有寫出code自動下載證交所上的csv檔
最近想整理更多個股日成交價量資訊,發現沒辦法抓了,會出現maxretryerror的錯誤,
看起來是被擋了,
加上了time.sleep和timeout設成None和fake useragent也沒辦法解決,
想請問各位有沒有什麼好方法呢?感謝!
作者: cory8249 (Cory)   2018-04-18 17:55:00
大概IP被鎖 會被禁一段時間
作者: ThxThx (洗洗睡)   2018-04-18 18:50:00
max retry error不是root cause你要先告訴大家retry失敗的原因是什麼或是你怎麼爬的,因為擋爬蟲的方法太多招了
作者: CaptPlanet (ep)   2018-04-19 10:02:00
感謝回覆 以解決 等一段時間後把time sleep加長已經可以正常運作 看起來是一開始頻率太高被鎖了而已

Links booklink

Contact Us: admin [ a t ] ucptt.com