阿里系,参与过阿里大型分布式爬虫,为阿里内部服务,5年开发经验,曾将开源webmagic改造为弹性分布式框架,技术非常稳定成熟,与携程,去哪较量过。对于反爬策略有些经验。数据可以放在阿里云odps中(理论存储无上限),如果后期我们需要数据挖掘,算法支持,也可以协助哦。.x.x.x.x.x.x.x.x.x.x.x.x.x.x.x.x.x.x.x.x.x.x.
曾爬取携程,去哪,创业邦等网站,单日最大数据量超20G,动态IP切换,web页面可查看当前执行数据。.............................
可兼职时间
可兼职地点
0条评论 雇主评价