[問題] 爬取infinite scrolling web

作者: ntuleo (里歐)   2015-06-30 12:28:03
有不用selenium可以爬infinite scrolling web的方法嗎?
有些page selenium沒有辦法爬(ex:quora),而且selenium很慢
有沒有其他方式可以background trigger infinite scrolling
讓我可以爬到整個網頁呢?
作者: talenttb (CC)   2015-07-08 08:31:00
查他的js呼叫那一隻api,然後組參數呼叫。 這種方式如何

Links booklink

Contact Us: admin [ a t ] ucptt.com