文章詳情頁
python - scrapy無法爬取數(shù)據(jù)，并且不能創(chuàng)建txt文件
瀏覽：132日期：2022-06-29 16:13:49
問題描述
問題解答
回答1：是xpath解析路徑的問題，謝謝大家
回答2：應(yīng)該是寫入模式有問題，試試 ab.
回答3：在linux運(yùn)行的吧，是不是有權(quán)限問題？
回答4：看日志輸出好像scrapy遇到robot.txt提前退出了，在settings中將ROBOTSTXT_OBEY改為ROBOTSTXT_OBEY = False試試。還不行就打斷點(diǎn)調(diào)試吧
排行榜
熱門標(biāo)簽
網(wǎng)公網(wǎng)安備