实现网
码农的头发

昵称登录后显示

1000/8小时
6年工作经验

北京新奥特科技有限公司
爬虫工程师

当前评分 10.0
专业技能
工作效率
服务态度

10

被预约次数

16

被收藏次数

4

被评价次数

擅长技能

本人一直从事爬虫工作,之前使用了一个自己开发的爬虫软件,现在使用开源的爬虫框架scrapy,能做到定制开发。
搭建scrapy + redis + mongo的爬虫系统,目前已抓取:网站,微博,微信,视频网站总共1000+ 个站点,能做到实时抓取,去重效率高,容错率高。可以抓取各大门户,YouTube等视频网站的视频。

项目经验

在目前公司专职做爬虫系统开发,爬虫方面就是我一个人支撑公司所有业务的基础数据。能做到快速有效,即时抓取。web网站,视频网站都能抓取,目前在研究抓youtube 的直播视频。

4条评论 雇主评价

可兼职时间

周六全天
周六半天
周日全天
周日半天
工作日下班后

可兼职地点

海淀

被预约

10

被收藏

16

被评价

4

立即预约

可兼职时间

周六全天
周六半天
周日全天
周日半天
工作日下班后

可兼职地点

海淀

已通过身份认证