logo
Loading...

爬取PTT資料後用JSON檔案存取,出現jsonReader_ValueError: Expected object or value錯誤 - Cupoy

您好:我爬取完PTT的資料後以JSON檔案存取,其格式內容和課程Scrapy爬取PTT的範例所存的J...

pycrawler,pycrawler-d38

爬取PTT資料後用JSON檔案存取,出現jsonReader_ValueError: Expected object or value錯誤

2020/02/18 01:17 上午
Python網路爬蟲討論版
小糖果
觀看數:4
回答數:1
收藏數:0
pycrawler
pycrawler-d38

您好:

我爬取完PTT的資料後以JSON檔案存取,其格式內容和課程Scrapy爬取PTT的範例所存的JSON是一樣的。我想用pandas.read_json將檔案轉為dataframe,但是檔案大小大約3GB,直接讀進會造成memory error,所以我用文檔中提到的chunksize和lines參數調整,文檔成功讀入,是一個jsonReader物件,但不知道為什麼不能迭代?我看另外一個文檔中的範例是可以的

顯示ValueError: Expected object or value,不知道是什麼問題?

謝謝!