文章详情页

python - 在编写scrapy爬虫的时候rules中allow的书写问题

浏览：162日期：2022-08-01 16:58:44

问题描述

在编写爬取58同城二手手机出售的信息的时候，rules里的allow应该怎么写？它里面给出的下一页或者第二页第三页等等的链接给出的都是缩减的链接，那么rules里的allow应该要怎么写呢？有哪位高手可以指点一二嘛？谢谢~

问题解答

回答1：

缩减的链接可以用urljoin()组合啊

Python 编程

上一条：python - 请问png读取出来到编码是怎样的？下一条：python 多进程使用

相关文章：

1. 老师无限级分类有点难哟不好理解2. npm镜像站全新上线3. 预订金和尾款分别支付4. javascript - PC端微信登陆授权js多次请求问题5. mysql在限制条件下筛选某列数据相同的值6. 主从复制 - MySQL 主从延迟 300s 以上，求大神解答7. PHPExcel表格导入数据库怎么导入8. 我在导入模板资源时遇到无法显示的问题，请老师解答下9. thinkphp6使用验证器信息如何输出到前端页面10. javascript - h5微信中怎么禁止横屏

排行榜

					
					javascript - 怎么实现让 div 里面的 img 元素 中心居中, 如下示例图
angular.js - Angular路由和express路由的组合使用问题
npm镜像站全新上线
javascript - avalon使用:duplex设置select默认option的bug
Android-studio导入.so库问题？
老师您的微信号是多少？
javascript - Java selenium 中使用click()方法点击超链接无效  用window.open() 也打不开页面
android - Genymotion 模拟器可以做屏幕适配检测吗？
html - 非微信官方网页，将由微信转换为手机预览模式
javascript - h5微信中怎么禁止横屏
angular.js - 想用angular实现模拟select下拉框效果，如下图，但是不知道怎么去实现？
				

热门标签