项目作者: HardworkFish
项目描述 :
scrapy with the splash to crawl some price of house from the relevant websites.
高级语言: Python
项目地址: git://github.com/HardworkFish/Project-03-fjSpider.git
房价爬虫
scrapy with the splash to crawl some price of house from the relevant websites.
使用概要
- 运行容器 splash :
docker run -d -p 5023:5023 -p 8050:8050 -p 8051:8051 scrapinghub/splash
- 开启 Mongod 服务
说明
爬取房天下、安居客的基本房价数据, 使用 Splash 进行网页 js 渲染