文章详情页
python - 在编写scrapy爬虫的时候rules中allow的书写问题
浏览:304日期:2022-08-01 16:58:44
问题描述
在编写爬取58同城二手手机出售的信息的时候,rules里的allow应该怎么写?它里面给出的下一页或者第二页第三页等等的链接给出的都是缩减的链接,那么rules里的allow应该要怎么写呢?有哪位高手可以指点一二嘛?谢谢~
问题解答
回答1:缩减的链接可以用urljoin()组合啊
相关文章:
1. javascript - requestAnimationFrame如何控制帧速?2. javascript - react 中绑定事件和阻止事件冒泡3. java - .jsp页面用<%= %>的方式获取数据存在一个很奇怪的问题4. 一道使用算法解决的java题(关于hashmap的问题)5. javascript - 百度链接尾部的这个参数是干嘛的?6. node.js - Nodejs微信开发,视频上传成功,但是不返回给用户7. mysql - 这条sql可以怎么优化,求帮助8. mysql索引的疑问9. 热切期待朱老师的回复,网页视频在线播放器插件配置错误10. 老师,请问下为什么这个地方的单引号里面的变量能够被解析呢?
排行榜

网公网安备