职位详情

岗位职责：1、根据公司及数据产品部门的业务要求，撰写技术实现方案，参与技术调研与选型；2、负责项目的开发规划、编码实现相关工作；3、负责基于Spark技术的海量数据的处理、分析、统计、挖掘工作；4、根据需求使用SparkStreaming和SparkSQL进行数据处理/查询/统计任职要求:1、3年以上scala开发经验，3年以上java开发经验。2、熟悉scala或java开发语言，扎实的算法和编程功底。3、对Spark及MR计算模型的原理和底层技术有一定深入，及时跟踪和了解开源分布式计算存储相关技术(Yarn，hbase，kafka等)。4、有海量数据处理开发经验，机器学习相关实践者优先5、诚实守信，有担当，有强烈的责任心和团队合作精神。