Scrapy 蜘蛛数据管道

分享海报

@user_3c6cb52e/scrapy-spider-data-pipeline

使用自定义项目管道构建和管理Scrapy网络爬虫。支持Splash渲染JavaScript页面，通过scrapy-rotating-proxies旋转代理，以及导出到MongoDB或Elasticsearch。