Re: [閒聊] DC

作者: surimodo (好吃棉花糖)   2022-06-04 02:45:13
※ 引述 《surimodo (搖滾少女!! 活力棉花糖!!)》 之銘言:
: 推 JerryChungYC: +Qㄅ 不用看內容 06/04 02:12
對欸
我第二次修正url的模式
(allpost爬蟲結果無url
改成+Q模式變快一點
但爬到馬來人還是很慢
應該還是文字太多
但如果allpost第一次不爬全文
無法解析看板
而且因為ptt限制好像也沒辦法同時爬
作者: JerryChungYC (JerryChung)   2022-06-04 03:02:00
同時爬是指啥只要存最新的aid就好了吧不過我現在腦袋也有點卡住就是ㄌ
作者: int0x80 (請逐項修改)   2022-06-04 03:08:00
aid轉網址有一套固定的規則所以在allpost拿aid+看板名稱後可以自己轉成url
作者: JerryChungYC (JerryChung)   2022-06-04 03:15:00
看了一下好麻煩 不如標題抓看板名稱再重search一次
作者: int0x80 (請逐項修改)   2022-06-04 03:16:00
不過為什麼不用網頁版爬阿 這樣也不用登入https://www.ptt.cc/bbs/ALLPOST/search?q=author%3Alapt
作者: JerryChungYC (JerryChung)   2022-06-04 03:17:00
網頁版有延遲ㄅ 文章不會馬上出現
作者: int0x80 (請逐項修改)   2022-06-04 03:17:00
阿 網址被截斷了
作者: int0x80 (請逐項修改)   2022-06-04 03:18:00
確實

Links booklink

Contact Us: admin [ a t ] ucptt.com