热线电话:13121318867

登录
2021-01-28 阅读量: 384
部署分布式爬虫的缺点?

每台主机需要手动搭建爬虫运行的环境,如Python、Scrapy和Scrapy-Redis。

需要将Scrapy项目代码拷贝到每台主机并手动运行爬虫。

如果项目功能发生了变更,需要更新所有主机上的代码。


0.0000
0
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子