文章详情页
python - 在编写scrapy爬虫的时候rules中allow的书写问题
浏览：219日期：2022-08-01 16:58:44
问题描述
在编写爬取58同城二手手机出售的信息的时候，rules里的allow应该怎么写？它里面给出的下一页或者第二页第三页等等的链接给出的都是缩减的链接，那么rules里的allow应该要怎么写呢？有哪位高手可以指点一二嘛？谢谢~
问题解答
回答1：缩减的链接可以用urljoin()组合啊
相关文章：
1. javascript - webpack构建工具重构代码的流程是怎么样的？2. java - 安卓调用c++lib3. 如何解决docker宿主机无法访问容器中的服务？4. javascript - 想做一个canvas的触摸画板，但屏幕会在画的时候滚来滚去，如何阻止？5. java - 大家可以分享一下各自如何高效编程吗？就是一些常用的配置及习惯等等6. mysql 5个left关键 然后再用搜索条件 几千条数据就会卡，如何解决呢7. javascript - 如何根据package.json来自动安装包8. css3 - 求css页面解决方案9. java - tomcat部署启动项目后报错 请大神帮我看一下10. mysql - sql 左连接结果union右连接结果，导致重复性计算怎么解决？
排行榜
网公网安备