1. PTT
  2. Python

[問題] dcard 爬蟲 403

作者: Kuba4ma (哦吼)   2021-02-05 14:12:49
https://i.imgur.com/bFovpAM.png
如圖
之前爬蟲都是爬取PTT的
最近改學習爬取dcard
我按照網路上的教學範例
結果都是回報403
之前爬PTT時沒有遇到這種情況
請問這要怎麼處理?
作者: TakiDog (多奇狗)   2021-02-05 14:34:00
帶好該帶的header
作者: kh555069 (yuan)   2021-02-05 17:38:00
用 cloudscraper
作者: moodoa3583 (金牌台灣啤酒)   2021-02-05 18:45:00
我打 api 沒問題欸，你試試看這支爬單一看板內的文章的 api 試試看https://www.dcard.tw/service/api/v2/forums/{看板名稱}/posts有要其他需求這邊找得到https://blog.jiatool.com/posts/dcard_api_v2/
作者: yoyo178134 (安安尼瑪)   2021-02-10 12:04:00
Postman curl試過再來爬啦==
繼續閱讀
[問題] pyqtgraph pen width>1會lagfishdon[問題] 爬蟲突然掛掉loser113[問題] 瀑布式網頁爬蟲問題superpaden[問題] 在 colab 安裝 libraqm 後無法正常使用art1[問題] matlab 類似 sys.argv 的功能caron0225[問題] 請問php call python自寫的lib問題HerryLDjango部署到Azurediorleoroy[問題] Yolo V3 Pytorch - memory issueyfly823[心得] FinMind 台股開源資料庫f496328mm[閒聊] 如何讓值在一段範圍內一直+1koow

Links booklink

Contact Us: admin [ a t ] ucptt.com