[問題] 怎麼用網路爬蟲下載這些檔案？ johnny9667 PTT批踢踢實業坊

作者: johnny9667 (大八) 2017-08-10 19:27:37

想請問一下我想要下載這些檔案
http://i.imgur.com/zmI0XPv.png
https://goo.gl/sw8vTR
我只是想下載這些檔案網路爬蟲可以嗎
大概怎麼用？

作者: CP64 ((￣▽￣＃)﹏﹏) 2017-08-10 19:35:00

基本上就下載網頁 -> 用選擇器找出所有連結 -> 下載檔案這個算簡單只要用支援 css selector 的 html parser 就好做

作者: johnny9667 (大八) 2017-08-10 19:40:00

樓上是說用網路爬蟲嗎？

作者: CP64 ((￣▽￣＃)﹏﹏) 2017-08-10 19:41:00

網路爬蟲平常做的事不就這樣嗎

作者: johnny9667 (大八) 2017-08-10 19:45:00

我沒用過不知道＠＠

作者: armpaul (armpaul叮了一聲新簡訊) 2017-08-10 19:57:00

RFC 我下了一堆都沒看

作者: johnny9667 (大八) 2017-08-10 19:59:00

我是不得不看

作者: sppmg (sppmg) 2017-08-10 20:33:00

wget -r -np -k $url

作者: hijkxyzuw (i,j,k) ×(x,y,z) 2017-08-11 00:46:00

apt install rfc-doc ## debian 都幫你包好了^rfc-doc^doc-rfc

作者: soem (æµæ°´) 2017-08-12 15:20:00

firefox -> DownThemAll addon

作者: OrzOGC (洞八達人.拖哨天王) 2017-08-12 17:05:00

我是抓網頁然後用regexp抓出list再用wget抓

繼續閱讀