文章详情页
我要在命令行同时不间断地运行八九个python爬虫程序（爬不同的网站）？
浏览：162日期：2022-08-21 18:56:02
问题描述
但是过一段时间总有一两个程序会无响应，好像是被挂起了，CPU占用率并不高，不到10％，内存占用也不算多，60％左右，爬虫程序是去批量下载文件，平均每个几兆到十几兆。我设置了这几个程序的优先级高于普通标准，但是还是会出现无响应的状况。版本 python 2.7
求问:这个问题算不算进程被挂起？以及应该如何解决这个问题？
谢谢！
问题解答
回答1：这种问题得自己调，多打log
回答2：Python 有 GIL
相关文章：
1. android - 哪位大神知道java后台的api接口的对象传到前端后输入日期报错，是什么情况？求大神指点2. docker api 开发的端口怎么获取？3. html - 爬虫时出现“DNS lookup failed”，打开网页却没问题，这是什么情况？4. docker - 各位电脑上有多少个容器啊？容器一多，自己都搞混了，咋办呢？5. docker容器呢SSH为什么连不通呢？6. docker网络端口映射，没有方便点的操作方法么？7. docker - 如何修改运行中容器的配置8. docker绑定了nginx端口 外部访问不到9. javascript - 求一款靠谱点的移动端图片查看器插件，老司机速进！10. javascript - jquery hide()方法无效
排行榜
网公网安备