大数据开发工程师

岗位职责：
1、参与公司大数据平台设计，主导数据接入，数据流水线、时序数据分析系统、数据服务等平台子模块的开发维护。
2、负责大数据平台组件间的集成、接口封装，相关的技术文档编写。
3、参与基于Hadoop生态系统的大数据平台相关组件技术调研，参与大数据平台组件选型。
4、实现数据产品研发工作，包括报表分析系统、元数据管理、数据质量管理、数据资产管理、数据服务接口等。
任职资格：
1、国家统招大学本科以上学历，计算机相关专业，具有扎实的计算机基础理论知识;
2、2年以上Java/Scala/Python语言应用开发经验，2年以上的大数据平台研发经验;
3、熟悉常用的面向对象设计模式和分布式系统开源框架;
4、熟悉linux开发环境及操作系统底层机制，并熟悉分布式系统底层实现机制;
5、熟悉Hadoop生态系统各组件技术架构，研究过Hadoop各组件源码或参与过Hadoop开源社区者优先考虑;
6、精通map/reduce应用框架，对流式处理框架storm/flink/spark stream至少熟悉一种;