该职位已失效,看看其他机会吧

JAVA开发工程师(数据中台)

1.2-1.6万
  • 贵阳观山湖区
  • 5-10年
  • 本科
  • 全职
  • 招2人

职位描述

PythonJavaScriptFlinkSpark数据中台
岗位职责:
1. 负责公司数据产品的系统分析与设计工作,承担核心功能代码编写,开发与维护系统公用核心模块;
2. 参与公司平台实时计算引擎(Flink/Spark)系统的架构设计及开发工作,能独立完成功能模块设计及研发工作;负责Flink/Spark引擎及平台的完善和优化,从稳定性、性能和功能等多方面进行架构设计和实现;
3. 开发数据中台核心工具链(如数据集成、数据开发、数据服务化API等),提升数据开发与交付效率。
4. 与业务部门协作,理解数据需求,提供标准化数据服务与解决方案,支持数据分析、BI、AI等场景。
5. 优化数据中台架构性能,解决高并发、海量数据场景下的技术难题,保障系统稳定性和数据时效性。
6. 跟踪大数据领域前沿技术(如实时计算、湖仓一体、DataOps等),推动技术落地与创新。

任职要求:
1. 本科以上(含)学历,5年以上开发经验;除Java外有Python、Scala语言开发经验的优先考虑;
2. 具备数据平台研发经验,具备优秀的系统架构设计能力;掌握数据管道、元数据管理、数据质量等功能设计;熟悉Lambda/Kappa/湖仓一体等大数据架构;
3. 熟练掌握Spark/Flink引擎工作原理,熟悉其源码及其任务运行流程,熟悉或了解过Apach Beam;
4. 熟练掌握Flink/Spark数据开发流程和编程模型,具备实时计算任务优化经验;
5. 熟悉Hadoop生态体系(HDFS/YARN/Hive/HBase等),熟悉Dolphinscheduler的基本使用;
6. 熟悉或使用过至少一种MPP数据库(如Doris、Clickhouse等);
7. 具备良好的沟通和团队协作、逻辑思维能力、业务理解能力和业务抽象能力,做事主动积极,有技术热情和激情面对挑战。

加分项:
(1)有开源项目贡献经验(如Apache项目)。
(2)熟悉数据仓库建模及ETL开发,了解Doris、StarRocks等OLAP引擎。
(3)有团队管理经验或复杂项目推进能力。
查看全部

工作地点

贵阳观山湖区贵州电商云

职位发布者

罗女士/HRBP

今日活跃
立即沟通
公司Logo贵州电子商务云运营有限责任公司
贵州电子商务云运营有限责任公司(简称“贵州电商云公司”)成立于2014年10月31日,为贵州广电网络传媒集团有限责任公司旗下重要子公司,致力于推动数字技术与实体经济深度融合发展。作为贵州省数字经济核心服务商,公司以“一码贵州”智慧商务大数据平台和“一码游贵州”智慧文旅平台为双引擎,构建覆盖生产、流通、销售全链条的数字化服务体系,业务涵盖电商交易、供应链金融、智慧物流及产业数字化解决方案。公司拥有国家高新技术企业资质,所有业务系统均为自主研发、自有知识产权,拥有贵阳和成都双研发中心,持有167项软件著作权、28项专利及CMMI5、 DCMM3等国际认证,先后获得国家大数据(贵州)综合试验区首批重点企业、贵州省大数据企业50强、工信部大数据产业发展示范企业,两度荣获“国家电子商务示范企业”称号,连续三次入选全国网络扶贫典型案例。目前,公司团队规模500余人,依托贵州广电网络传媒集团“台网端微”资源协同,深化“传媒+大数据”融合战略,服务县域经济与跨境电商发展,累计带动黔货出山交易额超550亿元,持续为推动乡村振兴注入数字动能。未来,我们将以“两码融合”战略为牵引,强化数据赋能与产业协同,助力贵州打造全国数字经济创新高地,践行国企责任,与各方伙伴共创价值。
公司主页