文章详情页

python - scrapy无法爬取数据，并且不能创建txt文件

浏览：108日期：2022-06-29 16:13:49

问题解答

回答1：

是xpath解析路径的问题，谢谢大家

回答2：

应该是写入模式有问题，试试 ab.

回答3：

在linux运行的吧，是不是有权限问题？

回答4：

看日志输出好像scrapy遇到robot.txt提前退出了，在settings中将ROBOTSTXT_OBEY改为ROBOTSTXT_OBEY = False试试。还不行就打断点调试吧

Python 编程

上一条：numpy - Python matplotlib 画直方图出错？下一条：python - django model是用get还filter

排行榜

					
					javascript - 切换掉当前页面后该页面的js动画会暂停？
golang - 用IDE看docker源码时的小问题
docker-compose 为何找不到配置文件？
在mac下出现了两个docker环境
boot2docker无法启动
objective-c - iOS开发支付宝和微信支付完成为什么跳转到了之前开发的一个app?
angular.js - angularjs 路由如何禁止缓存
Android 关于图片压缩的问题。
angular.js - angular获取radio选项的值，在线等啊亲，连续加班一个礼拜了……
java - 为什么hibernate查询表集报错?
angular.js - angularjs directive + D3,  scope数据更新后，重新生成可视化图后新图直接覆盖在老图之上
				

热门标签