职位描述：
岗位职责：
1、负责大数据任务开发设计和代码编程工作；
2、负责海量数据的清洗、处理和挖掘工作，支持数据分析师和算法工程师的数据需求；
3、负责离线/实时的数据存储和加工处理，保证数据质量，负责数据监体系的建立和维护；
4、使用hive、spark、mapreduce进行数据处理，协助建立数据模型，对数据挖掘脚本进行优化；
5、研究前沿技术，解决实际场景中的业务问题，优化离线/实时大数据计算任务的性能。
任职资格：
1、本科及以上学历，大数据相关开发经验3年以上，至少精通使用java、scala、python其中一门开发语言；
2、具有主流大数据工具/平台实际项目经验hadoop/hive/hbase/spark/kafka等；
3、熟悉数据库，数据仓库（hive）的原理及使用，熟悉数据仓库开发流程，分层架构，对数据敏感；
4、熟悉大规模数据挖掘、机器学习、分布式计算等相关技术；有解决大容量数据实时及实时计算的开发经验；
5、思维活跃，能快速学习新知识，对算法研发和优化富有热情，具有较好的研究能力、实际动手能力和学习能力，沟通能力强.
：