headers中有某一樣參數每次拜訪頁面會隨機變更該如何解決
2020/03/02 下午 04:17
Python網路爬蟲討論版
蕭子修/
觀看數:3
回答數:1
收藏數:1
pycrawler
pycrawler-d31
教練你好:
請問自帶headers時,headers其中有某一樣參數每次拜訪頁面會隨機變更
該怎麼辦呢?
回答列表
-
2020/03/03 上午 02:54張維元 (WeiYuan)贊同數:1不贊同數:0留言數:0
嗨,子修
你可能要先確認這個 Headers 是否為必備的,如果不帶也沒差是可以不用管他的。那如果是非帶不可的話,我們要去觀察他的規則,可能是根據時間產生、或是隨機、或是從 Server 產生的。若是從 Server 產生的話,就變成我們每次在請求前,都要先爬一次取得該頁面的 Headers 才可以。
如果這個回答對你有幫助請主動點選「有幫助」的按鈕,也可以追蹤我的GITHUB帳號。若還有問題的話,也歡迎繼續再追問或者把你理解的部分整理上來,我都會提供你 Review 和 Feedback 😃😃😃