您的位置：首页技术文章
文章详情页

python - 在编写scrapy爬虫的时候rules中allow的书写问题

浏览：239日期：2022-08-01 16:58:44

问题描述

在编写爬取58同城二手手机出售的信息的时候，rules里的allow应该怎么写？它里面给出的下一页或者第二页第三页等等的链接给出的都是缩减的链接，那么rules里的allow应该要怎么写呢？有哪位高手可以指点一二嘛？谢谢~

问题解答

回答1：

缩减的链接可以用urljoin()组合啊

标签： Python 编程
上一条：python - 请问png读取出来到编码是怎样的？下一条：python 多进程使用
相关文章：
1. android - Home键app重新启动的问题2. 自学，刚编了helloworld就失败了3. python3.x - mongodb 显示不出中文，都是方块，该如何解决？4. 为啥最大化个窗口还得找一堆理由?5. 请问PHPstudy中的数据库如何创建索引6. javascript - 在react中写行间样式的whiteSpace不生效7. javascript - 怎么获取一个页面中的所数据，然后弄成一个json格式的字符串传给后台8. html5 - chrome下的a标签download属性无法调出另存为的下载框9. android - 微信这个效果是怎么实现的10. javascript - 求助一个关于indexedDB的问题
排行榜
android - Home键app重新启动的问题
android - Home键app重新启动的问题
1. CSS3可否做出这个效果？
2. 浅谈Vue使用Cascader级联选择器数据回显中的坑
3. javascript - nginx反向代理静态资源403错误?
4. android - recyclerview显示错乱
5. javascript - 怎么用flatlist替换scrollview？
6. javascript - 我的站点貌似被别人克隆了， google 搜索特定文章，除了域名不一样，其他的都一样，如何解决？
7. angular.js - 如何控制ngrepeat输出的个数
8. 请问PHPstudy中的数据库如何创建索引
9. android - 微信这个效果是怎么实现的
10. javascript - windos下第一次用Django无法正确创建工程目录
热门标签