岗位职责
1、负责大数据相关应用的开发,接入供给的业务开发
2、负责数据库同步功能的相关开发
3、负责任务计算等相关需求开发
任职要求
1、熟悉Hadoop、HBase等分布式计算平台开发,3年以上hadoop使用经验,有大数据应用系统开发经验
2、熟悉Ketle等ETL工具的使用和开发;具有一定数据模型和数据架构基础,熟悉hadoop/hive和常用数据库
3、熟悉SQL/HQL,有较好的SQL性能调优经验;熟悉hive sql的开发
4、熟悉ETL设计、调度、监控、算法等,能够熟练的进行事实表、维度表的开发
5、Flink实时等相关经验和Spark批处理经验
6、熟悉Doris的使用