文章详情页
python - 在编写scrapy爬虫的时候rules中allow的书写问题
浏览：146日期：2022-08-01 16:58:44
问题描述
在编写爬取58同城二手手机出售的信息的时候，rules里的allow应该怎么写？它里面给出的下一页或者第二页第三页等等的链接给出的都是缩减的链接，那么rules里的allow应该要怎么写呢？有哪位高手可以指点一二嘛？谢谢~
问题解答
回答1：缩减的链接可以用urljoin()组合啊
相关文章：
1. python - 求一个在def中可以实现调用本def满足特定条件continue效果的方法（标题说不太清楚，请见题内描述）2. $fields = $values = [];这条代码一直定义不了，一直报错，老师的源码也是被报错的,执行不了,请问该怎么解决这个问题3. USE关键字4. javascript - mysql插入数据时怎样避免与库中的数据重复？5. MySQL 如何 SELECT 除去某一列的所有列？6. 导入phpmyadmin的时候报错了7. MySQL能否给某个字段的值设置有效期？8. 求一个mySQL安装包9. mysql数据库做关联一般用id还是用户名10. MySQL 这句 创建表结构语句的错误在哪？
排行榜
网公网安备