1.8.4 ScrapyRedis的安装

ScrapyRedis 是 Scrapy 分布式的扩展模块,有了它我们可以方便地实现 Scrapy 分布式爬虫的搭建,本节来介绍一下 ScrapyRedis 的安装方式。

1. 相关链接

2. Pip安装

推荐使用 Pip 安装,命令如下:

pip3 install scrapy-redis

3. Wheel安装

也可以到 PyPi 下载 Wheel 文件安装:https://pypi.python.org/pypi/scrapy-redis#downloads,如当前最新版本为 0.6.8,则可以下载 scrapy_redis-0.6.8-py2.py3-none-any.whl,然后 Pip 安装即可。

pip3 install scrapy_redis-0.6.8-py2.py3-none-any.whl

4. 测试安装

安装完成之后,可以在 Python 命令行下测试。

$ python3
>>> import scrapy_redis

如果没有错误报出,则证明库已经安装好了。

results matching ""

    No results matching ""