实现网
海与山

昵称登录后显示

1000/8小时
3年工作经验

河南奥瑞环保科技股份公司
大数据工程师 后端技术人员

spark/hadoop
spring boot
hive mysql
hbase redis

0

被预约次数

0

被收藏次数

0

被评价次数

擅长技能

熟练掌握Java,Scala编程语言。熟悉linux基本命令与操作
熟练hadoop组件的安装与部署,如(hadoop,spark,hbase,hive,mysql,mongodb,kafka,flume)等
熟悉Hdfs文件存储系统、Map/Reduce离线并行计算
熟练Spark的使用,sparkstreaming实时获取kafka中数据,掌数据倾斜解决方案。
熟练使用MySQL,Hive等关系型数据库,对数据进行查询与操作
熟悉kafka工作机制及kafka与flume结合的使用。
熟悉Zookeeper分布式协调服务应用。
掌握Sqoop、Flume、Crontab定时器等辅助工具。
熟悉Hive系统架构,能够使用hive进行海量数据的查询分析,能够使用sqoop进行 关系型数据库与HDFS/Hive之间进行数据的导入导出,具有一定调优经验。
可以熟练操作数据库,如:mysql,hbase,mongodb等
熟悉spring boot,java,后端开发有自己的一套框架,可进行快速开发
前端采用VUE,UNIAPP.HTML,CSS及JavaScript技术

项目经验

数据可视化大屏,超12个大模块组成,gs地图开发,主要负责后端开发,使用spring boot服务开发
大数据综合管理平台,整体架构策划,使用sparkstreaming进行超亿数据的数据分析与采集,以hdfs文件系统以及es作为支撑
全文检索(内部),类似于百度搜索,hdfs作为文件存储,es作为全文检索,搜索内容包括文件里面的所有内容,可自定义设置分词,屏蔽禁词,登录分权限,以redis数据库作为用户账号密码的登录存储实现。
数据接口管理平台(对外),可将公司访问接口配置到平台,用户可进行登录,查看免费接口,可进行充值调用付费接口,用户通过支付宝进行付款获取相对应的积分。
小程序开发,目前做的小程序有 家政小程序,跑腿小程序,物流以及外卖小程序

0条评论 雇主评价

暂无评论~

可兼职时间

周六全天
周日全天
工作日下班后
周六半天
周日半天

可兼职地点

所有

被预约

0

被收藏

0

被评价

0

立即预约

可兼职时间

周六全天
周日全天
工作日下班后
周六半天
周日半天

可兼职地点

所有