ETtoday範例能否利用開發者工具,去找到瀏覽器中的Javascript發了哪些請求並抓取資料
2020/03/18 11:11 下午
Python網路爬蟲討論版
賴文修
觀看數:7
回答數:2
收藏數:0
https://www.ettoday.net/news/news-list.htm
我發現我就算是用browser.execute_script("window.scrollTo(0, 9999999999);")自己往下捲動
又或者是手動一直往下捲動,
我發現他的文章數會有一個上限,為780則,
所以我想要請請:
在這樣的情況下我要如何達到「取出今天所有的新聞」呢?
上圖顯示的是我在2020/03/18的11:11開始往下捲動
他的最底一則為2020/03/18的08:05