岗位职责：

1、负责异构数据系统和大数据平台的集成与融合;
2、负责数据挖掘算法的设计及对海量数据进行挖掘分析;
3、负责分布式数据仓库平台、海量数据批处理平台、实时数据处理平台等系统开发;
4、参与海量数据处理，业务数据体系的设计、数据统计、分析及数据建模;
5、参与数据平台各系统的性能分析与系统优化，不断提高系统运行效率;
6、完成领导交办的其他任务

任职要求：

1、计算机及其相关专业;
2、具备实时处理框架的设计和开发能力，熟练掌握Storm、Spark streaming等大数据实时处理框架中的一种;
3、熟悉Spark 、R、Hadoop、Hbase、Hive、Elastic Search/Solr等相关技术;
4、熟悉Scala、熟悉Linux开发环境，能进行shell脚本的编写;
5、具有较强的逻辑分析能力，高度的责任心及团队合作精神;
6、具有实际大数据项目的成功经验者优先考虑。