您的位置:首頁技術文章
文章詳情頁

python - scrapy無法爬取數據,并且不能創建txt文件

瀏覽:101日期:2022-06-29 16:13:49

問題描述

python - scrapy無法爬取數據,并且不能創建txt文件python - scrapy無法爬取數據,并且不能創建txt文件python - scrapy無法爬取數據,并且不能創建txt文件python - scrapy無法爬取數據,并且不能創建txt文件python - scrapy無法爬取數據,并且不能創建txt文件

問題解答

回答1:

是xpath解析路徑的問題,謝謝大家

回答2:

應該是寫入模式有問題,試試 ab.

回答3:

在linux運行的吧,是不是有權限問題?

回答4:

看日志輸出好像scrapy遇到robot.txt提前退出了,在settings中將ROBOTSTXT_OBEY改為ROBOTSTXT_OBEY = False試試。還不行就打斷點調試吧

標簽: Python 編程
国产综合久久一区二区三区