您的位置：首页技术文章
文章详情页

我要在命令行同时不间断地运行八九个python爬虫程序（爬不同的网站）？

浏览：211日期：2022-08-21 18:56:02

问题描述

但是过一段时间总有一两个程序会无响应，好像是被挂起了，CPU占用率并不高，不到10％，内存占用也不算多，60％左右，爬虫程序是去批量下载文件，平均每个几兆到十几兆。我设置了这几个程序的优先级高于普通标准，但是还是会出现无响应的状况。版本 python 2.7

求问:这个问题算不算进程被挂起？以及应该如何解决这个问题？

谢谢！

问题解答

回答1：

这种问题得自己调，多打log

回答2：

Python 有 GIL

标签： Python 编程
上一条：flask - Python使用redis发布订阅时，监听频道时出现的问题？【一句话描述不清楚，请各位细看内容】下一条：python - django queryset自定义排序问题
相关文章：
1. 数组 - mysql 輸出到 php array 然後印出?2. python - 正则表达式匹配和原生字符的问题3. python - pymysql建立连接出错4. 数据结构 - java翻转链表是如何实现的?5. javascript - vue webpack打包问题6. javascript - 在chrome等浏览器中，如何隐藏掉ajax请求，使其不会显示在console中7. nginx反向代理配置访问后台，基础问题？8. javascript - 修改表单多选项时和后台同事配合的问题。9. CSS3中background-size的问题10. javascript - VUE 递归写的树状组件，怎么向外传递事件？
排行榜
数组 - mysql 輸出到 php array 然後印出?
数组 - mysql 輸出到 php array 然後印出?
1. python - pymysql建立连接出错
2. python - 正则表达式匹配和原生字符的问题
3. javascript - vue webpack打包问题
4. 数据结构 - java翻转链表是如何实现的?
5. javascript - 修改表单多选项时和后台同事配合的问题。
6. nginx反向代理配置访问后台，基础问题？
7. javascript - VUE 递归写的树状组件，怎么向外传递事件？
8. javascript - 在chrome等浏览器中，如何隐藏掉ajax请求，使其不会显示在console中
9. CSS3中background-size的问题
10. css - input中transition 设置background-color过渡，chrome浏览器页面初始化渲染会有过度效果
热门标签