项目作者: HardworkFish

项目描述 :
scrapy with the splash to crawl some price of house from the relevant websites.
高级语言: Python
项目地址: git://github.com/HardworkFish/Project-03-fjSpider.git
创建时间: 2018-08-09T14:56:04Z
项目社区:https://github.com/HardworkFish/Project-03-fjSpider

开源协议:

下载


房价爬虫

scrapy with the splash to crawl some price of house from the relevant websites.

使用概要

  • 运行容器 splash : docker run -d -p 5023:5023 -p 8050:8050 -p 8051:8051 scrapinghub/splash
  • 开启 Mongod 服务

说明

爬取房天下、安居客的基本房价数据, 使用 Splash 进行网页 js 渲染