工作职责:
1.参与大数据平台的搭建及大数据相关组件二次开发集成、完成系统调试、解决大数据相关组件技术问题;
2.负责项目现场的需求分析、设计、ETL开发、报表大屏开发等工作
3.参与项目现场大数据平台的离线数仓、实时数仓、数据服务化的设计、开发、性能优化,为上层分析和挖掘提供可靠、统一的离线+实时数据服务;
4.参与数据挖掘相关项目算法实施。
任职要求:
1.计算机相关专业,专科及以上学历,1年以上大数据开发相关工作验;
2.熟悉Hadoop/Spark/Hive/Flink//DataX等大数据平台搭建和使用,有Java/Python/Scala等开发经验优先;
3.精通数据建模及ETL设计开发,对数据仓库、数据平台、数据分析深刻理解,具备丰富的海量数据加工处理和优化经验;
4.对数据挖掘和机器学习有所涉猎,熟悉常用的机器学习算法和数据模过程的优先
5.沟通流畅,有一定的业务理解能力