[問題] Python 爬蟲到原X屋問題

作者: hy6jao (vast)   2019-09-01 23:30:00
各位大大好
我是一個Python 的新手,想爬蟲看看原X屋
之前爬其他網頁都是html的
所以用 requests等等爬進去
但原X屋一進去網頁是 evaluate.php
看資料也是是evaluate.php底下
那要如何讀取這些資料到Python 裡面
請各位大大幫幫忙,讓我學習學習
謝謝
作者: vi000246 (Vi)   2019-09-02 01:48:00
看了一下 也是html啊 沒什麼特別的技巧把裡面下拉選單的值爬出來 如果evaluate.php沒辨法返回你想要的html 要看看是不是表頭或是有反爬蟲的機制
作者: windclara (null)   2019-09-02 23:20:00
先掛User agent試試吧

Links booklink

Contact Us: admin [ a t ] ucptt.com