实现网
丿我欲疾风前行灬

昵称登录后显示

1200/8小时
3年工作经验

深圳追一科技有限公司
python开发

深圳呗佬智能有限公司
高级爬虫工程师

深圳市电陶思创科技有限公司
爬虫工程师

docker
django
爬虫

2

被预约次数

1

被收藏次数

0

被评价次数

擅长技能

● 熟悉掌握python语言,熟悉linux环境开发
● 熟练使用scrapy、requests、gevent等爬虫库
● 熟练使用mysql、mongodb、redis等数据库操作
● 熟练使用django、flask等后台框架
● 熟练项目部署和管理,同时还搭建过gitlab、jumpserver、portainer、ELK等等

项目经验

软路由
项目描述:软路由项目从0到1
● 云平台前后端,django+Vue
● kvm自动化构建
● 自定义Centos ISO,中文字符界面、内核源码编译、添加网卡驱动等
● 所有项目走gitlab ci自动化,例如:从提交变更、构建iso、上传VMware、构建虚拟机

律所OA系统
项目描述:管理电催和外访
● DRF+celery+channels+jwt+mptt

快速教育服务
项目描述: 负责项目组api服务,重构已有的快速教育服务,优化项目构建
● 弃用falsk注册路由,改用falsk-restful注册和管理路由
● 弃用print打印,改用logging统一日志打印,自定义HTTPHandler发送告警中心
● 弃用手动参数校验,改用reqparse统一参数校验
● 弃用多层异常处理,改用abort做统一异常处理

Docker分布式爬虫集群
项目描述: 负责公司数据爬取、爬虫架构设计搭建、后台对接。
● 搭建docker分布式异步协程爬虫集群架构
● tasker短信转发破解短信验证码
● 调用打码平台破解滑动验证码、点选验证码
● 深度学习卷积神经网络破解字符验证码

深智云搜索引擎
项目描述: 负责深智云搜索引擎数据支持,爬取顺企网、企查查、1688黄页等网站
● 基于scrapy、scrapy-redis分布式爬虫架构搭建和优化
● docker分布式爬虫
● bloomfilter去重和队列优化

0条评论 雇主评价

暂无评论~

可兼职时间

自由职业者,时间充裕

可兼职地点

远程
中国

被预约

2

被收藏

1

被评价

0

立即预约

可兼职时间

自由职业者,时间充裕

可兼职地点

远程
中国

已通过身份认证

已通过履历认证

已通过学历认证