职位描述：
岗位职责：
1、参与大数据平台、工具平台的架构、设计以及实现；
2、参与对项目的开发需求进行评审，制定项目的设计文档、开发计划文档等；
3、负责公司各类数据产品数据抽取、清洗，以及数据算法与存储的设计和优化；
4、优化大数据平台的性能，提高稳定性；
5、负责大数据平台的组件升级与参数优化。
任职要求：
1、本科及以上学历，3年以上相关技术背景，具备扎实的数据结构和算法基础，扎实的工程实现能力；
2、熟悉hadoop大数据相关技术体系，包括但不限于hbase，hdfs，storm，kafka，storm、spark、hve、flume等；
3、精通java或python，能熟练编写规范代码，有较强的数据库及sql开发调优能力；
4、熟悉自然语言处理/机器学习/数据挖掘领域，熟悉常用的机器学习算法优先考虑；
5、有大规模数据收集，日志处理经验，有游戏数据分析背景优先考虑；
6、深入研究过大数据框架的运行机制、实现原理、源码者优先考虑。