实现网
Yolo-8022af63

昵称登录后显示

300/8小时
6年工作经验

上海思芮科技有限公司
数据开发工程师

java
python
爬虫

0

被预约次数

0

被收藏次数

0

被评价次数

擅长技能

毕业于某985/211,多年工作经验深刻理解产品需求;
主要负责后端开发,及跨平台方案,技术栈及项目丰富;

某中型企业数据开发工程师,6年经验,会java、python,主要是后端开发、爬虫、数据开发相关工作;
前端还行,会vue.js。

其他没啥作品,都是内网开发,自己平时没咋整其他的,后面整一个放在github上面吧,没啦。。。

项目经验

1.日志处理系统。后端使用elasticsearch和hdfs作为数据存储系统,使用logstash和spark streaming接受服务器日志,基于elastic search api开发web服务器,使用echarts制成图表,从多个维度展示日志,同时提供日志搜索功能。
2.报表系统。使用spark streaming完成数据清洗,hive进行数据存储,对狐友各项指标进行统计,hbase存储统计结果。在统计结果之上,使用spring boot,spring mvc,echarts,bootstrap完成报表系统。
3.标签系统。使用的技术栈同上,用spark streaming计算用户标签,用hbase存储标签,标签系统负责标签查询和展示。
4.实时特征平台。使用storm和自研分布式计算引擎完成,实现实时特征计算平台。特征500+,每天数据量十亿级别。
5.实时数仓。在kafka+flink之上构建配置化的计算系统,通过配置化即可生产业务表.数据表30+,每秒千万级数据量。

0条评论 雇主评价

暂无评论~

可兼职时间

周六全天
周日全天
工作日下班后
周六半天
周日半天

可兼职地点

高新
全市

被预约

0

被收藏

0

被评价

0

立即预约

可兼职时间

周六全天
周日全天
工作日下班后
周六半天
周日半天

可兼职地点

高新
全市