logo
Loading...

ETtoday範例能否利用開發者工具,去找到瀏覽器中的Javascript發了哪些請求並抓取資料 - Cupoy

https://www.ettoday.net/news/news-list.htm我發現我就算是用...

ETtoday範例能否利用開發者工具,去找到瀏覽器中的Javascript發了哪些請求並抓取資料

2020/03/18 03:11 PM
Python網路爬蟲論壇
賴文修
觀看數:0
回答數:2
收藏數:0

https://www.ettoday.net/news/news-list.htm


我發現我就算是用browser.execute_script("window.scrollTo(0, 9999999999);")自己往下捲動


又或者是手動一直往下捲動,


我發現他的文章數會有一個上限,為780則,

所以我想要請請:


在這樣的情況下我要如何達到「取出今天所有的新聞」呢?

上圖顯示的是我在2020/03/18的11:11開始往下捲動

他的最底一則為2020/03/18的08:05