···
首页
···
开发工具
···
开发入门教程
···
网址导航
···
搜索
Ctrl K
redis分布式
13 Redis 的简单使用和配置
Redis的简单使用和配置,上一个小节我们简单学习了一下 MongoDB 数据库，这节课我们来学习下另外一个在爬虫开发中经常会用到的数据库，这就是我们大名鼎鼎的键值对数据库–Redis。,Redis 以它超快的读写速度受到爬虫开发...
Scrapy 的分布式实现
Scrapy 的分布式实现,今天我们简单介绍下 Scrapy 的分布式实现框架：Scrapy-Redis 并基于该插件完成一个简单的分布式爬虫案例。,1. 一个简单的分布式爬虫案例,我们以前面的第16讲的头条热点新闻爬虫基础，使用 scrapy-r...
Redis 数据库的基本操作
Redis 数据的基本操作,Scrapy 框架本身没有分布式功能，但是配合 Redis 服务后就能实现分布式，于是就诞生了 Scrapy-Redis 这样的框架。它在 Scrapy 的基础上配合 Redis 进行了一些改造，实现了分布式的功能。本节会介绍 ...
