scrapy-splash

7热度

2回答

Scrapy Shell和Scrapy Splash

我们一直在使用scrapy-splash middleware来通过Splash脚本程序容器中运行的JavaScript引擎传递刮过的HTML源代码。 如果我们想在蜘蛛用飞溅，我们配置一些required project settings并产生Request指定特定meta arguments： yield Request(url, self.parse_result, meta={ '

python web-scraping scrapy scrapy-splash scrapy-shell 2016-02-11

---