文章详情页
我要在命令行同时不间断地运行八九个python爬虫程序（爬不同的网站）？
浏览：74日期：2022-08-21 18:56:02
问题描述
但是过一段时间总有一两个程序会无响应，好像是被挂起了，CPU占用率并不高，不到10％，内存占用也不算多，60％左右，爬虫程序是去批量下载文件，平均每个几兆到十几兆。我设置了这几个程序的优先级高于普通标准，但是还是会出现无响应的状况。版本 python 2.7
求问:这个问题算不算进程被挂起？以及应该如何解决这个问题？
谢谢！
问题解答
回答1：这种问题得自己调，多打log
回答2：Python 有 GIL
相关文章：
1. python - （初学者）代码运行不起来，求指导，谢谢！2. 为什么python中实例检查推荐使用isinstance而不是type？3. mysql里的大表用mycat做水平拆分，是不是要先手动分好，再配置mycat4. window下mysql中文乱码怎么解决？？5. sass - gem install compass 使用淘宝 Ruby 安装失败，出现 4046. html5 - H5 SSE的本质是什么？7. javascript - h5上的手机号默认没有识别8. python - 获取到的数据生成新的mysql表9. python的文件读写问题？10. javascript - js 对中文进行MD5加密和python结果不一样。
排行榜
网公网安备