大数据开发、数据挖掘、文本处理、爬虫,熟练掌握Hadoop、Python,通过python实现QQ空间、豆瓣、贴吧、微信公众号等众多网站的爬虫,做过多种文本挖掘分析。
通过Python实现图片搜索的。做过几个小型的网站开发。
熟练掌握hdfs、mapreduce、hive、impala、hbase等大数据的相关工具,数量掌握oracle和MySQL,使用redis等。
在大数据方面,搭建和部署大数据平台,从数据收集、数据转换、数据存储、数据分析等。处理游戏数据给审计使用。
图片搜索:实现以图搜图的功能。
爬虫:爬取QQ空间、豆瓣、知乎等众多网站的信息。
自动回帖:Python实现在论坛自动回帖的功能
hadoop平台搭建:搭建公司的大数据平台以及维护和升级。
数据分析处理:通过hive和impala以及shell脚本,完成数据的收集、入库、转储等,供审计查看。
数据挖掘:参与微博的预测,预测一条微博在一周内的转发、评论、点赞次数。
可兼职时间
可兼职地点
0条评论 雇主评价