文章详情页

python爬虫 - scrapy使用redis的时候，redis需要进行一些设置吗？

浏览：26日期：2022-06-25 17:48:47

问题描述

用scrapy+redis+mongodb写了个爬虫，运行时不能爬取所有符合规则的网址，猜想是不是redis需要进行设置之类的，求高手解答。

问题解答

回答1：

说的具体一点啊，你这样说我也不清楚到底是哪里有问题,贴出错误代码或者提示大家一起看看

Python 编程

上一条：redis - 微信网页授权的access_token需要缓存吗？下一条：win7下用cygwin编译redis3.0报错

排行榜

					
					javascript - 关于微信公众号开发的一个trouble!
css3 - transition transform初始display:block怎么就没移动效果？
最新版的phpstudy的mysql版本只是5.5，有没有5.6或者5.7版本的集成版呀？
javascript - 这两种JS写法有什么区别
css - 这个线怎么做,效果是竖直的效果,
android - Gradle慢成xx了
javascript - vue报错，昨天也是这么写的也没报错呀，今天就报错了，不知原因。求解决
css - 关于angular页面打印问题
javascript - vue el 重复挂载 同一个实例
html - 谁能推荐一个类似apple官网的模板，用来展示产品的？
css - font-face引入的新字体无法在火狐浏览器上显示？但是谷歌可以？
				

热门标签