大数据开发工程师

岗位职责：
1.负责数据仓库模型设计、ETL开发、任务调度开发和管理，确保数据服务满足业务要求.
2.负责离线和实时数据仓库的开发和管理工作，解决开发过程中的技术难点，优化数仓开发效率.
3.负责公司BI报表及可视化决策分析平台调研及落地.
任职要求：
1.熟悉至少一种大数据常用组件及技术，如Hive/Hadoop、Flink、Hbase、Flume、Spark、Kafka等；
2.熟悉至少一种开发语言，如Java、Python、Scala等.
3.熟悉Linux 基础命令，熟悉shell语言，熟练掌握常用的运维监控和系统诊断相关命令.
4.会编写MySQL、Clickhouse、GP、HiveQL、SparkSQL、FlinkSQL之中至少一种数据库语言，了解基本的数据库调优知识.
5.具备数仓开发经验者优先，对数仓建模有一定理解和实战经验.
6.熟悉数据可视化工具和技术，如Quick BI、Fine Bl、Dataease等，并能够将数据分析结果以直观和易懂的方式呈现，制作仪表盘、图表和报告等.
7.熟悉至少一种主流大数据调度工具DolphinScheduler、Azkaban、Airflow、Oozie和Xxl-job，有部署经验者优先考虑.
8.熟悉至少一种主流ETL工具，如Kettle、Datax、DataPipeline等，有部署经验者优先考虑.