项目描述 ：
使用Scrapy框架，Scrapy-Redis库实现Scrapy的分布式。其中使用 Scrapy-Redis_BloomFilter库代替Scrapy-Redis库，采用Bloom Filter算法优化去重机制

高级语言： Python

项目主页：

项目地址: git://github.com/Lousm/Product.git

创建时间： 2018-11-06T02:54:24Z
项目社区：https://github.com/Lousm/Product
开源协议：GNU General Public License v3.0
下载