更新于 2025-12-25 01:02:29

大数据开发工程师

1.5-1.8万
  • 天津滨海新区
  • 3-5年
  • 硕士
  • 全职
  • 招2人

职位描述

数据仓库数据架构数据中台开发PythonJavaSparkFlink
工作职责
(1)拥有优秀的数据开发和数据处理能力,负责公司大数据平台核心业务模块的开发与维护,基于Hadoop、Spark、Flink等主流大数据框架,构建高效、稳定的数据处理链路,支撑业务数据化运营需求。
(2)针对数据支撑业务,提供数据分析、数据接口、基础模型、汇总模型、ETL流程等设计和研发。
(3)参与项目需求对接与分析,负责数据接入、数据清洗、数据加工等。
(4)有较强的系统问题分析经验和能力,能够解决复杂的系统问题。
招聘要求
(1)计算机、软件工程、自动化等相关专业硕士及以上学历;
(2)3年以上大数据开发相关工作经验,有完整大数据项目从设计到上线的落地经验;
(3)精通至少一种主流编程语言(Java/ Python),具备扎实的编码基础和良好的编码规范,能独立完成复杂业务模块的开发,精通python优先;
(4)精通Flink、Spark、Kafka、Hive、Hbase、Doris、Clickhouse、HDFS、Zookeeper、MR等大数据组件,具有搭建、调优、运维和开发经验;
(5)熟练掌握数据库相关知识,包括关系型数据库(如MySQL、PostgreSQL)和非关系型数据库 (如MongoDB、ElaticSearch、Redis)的使用,熟悉SQL和NoSQL解决方案及使用场景,能进行数据库设计、优化和管理;
(6)有主流湖仓开发经验,参与过大型湖仓库建设项目,具备数据仓库模型设计、ETL开发、多维数据模型设计、流批一体化计算架构等技能,能够进行数据模型优化和性能调优;
(7)熟悉ETL开发流程,具备复杂数据处理场景的问题排查与优化能力,能有效解决数据倾斜、任务失败、性能瓶颈等常见问题;
(8)熟悉Unix/Linux基本操作,能够在Unix/Linux 环境下进行开发、部署和问题排查,熟悉常用的命令和脚本编写,具备使用Docker、 K8s进行容器化部署的经验;
(9)有实时计算、流处理相关项目开发经验,或熟悉Flink CDC、Debezium等数据同步工具者优先;
(10)沟通交流能力强,良好的团队合作精神,工作主动性强。具备开展合作交流与应用推广能力。

工作地点

天津滨海新区国家超级计算中心新楼

职位发布者

胡玥/人事经理

三日内活跃
立即沟通
公司Logo天津市天河数字产业科技有限公司
天津市天河数字产业科技有限公司(以下简称“天河数科”)是国家超级计算天津中心(以下简称“天津超算中心”)下属子公司。作为紧密围绕天津滨海新区区委区政府对天津超算中心发展的新要求设立的产业服务公司,公司聚焦智慧城市、智慧医疗等业务板块,形成产业导入、科技招商、投融资、园区运营、企业孵化等综合服务板块,打造数字经济产业生态,并积极设立产业基金,为新区数字经济发展提供投融资支持,引育数字经济企业落户。天河数科深入开展算力赋能,依托天津超算中心基础设施资源及技术平台,聚集产业需求,重点围绕算力技术、数据要素流通与人工智能、数字孪生应用等业务方向,面向智慧医疗、智慧消防、智慧应急、能源低碳、智慧城市等不同行业领域提供算力、数据、智能产品和解决方案,深度融入到城市的发展当中。
公司主页