400-885-9898
雇员点评标签
职位描述
数据湖Spark
岗位职责:
1、设计并开发高性能、高可靠的海量数据ETL/ELT管道，支撑制造业各类业务数据的接入、清洗、整合与计算。
2、深入理解制造业业务（如生产、质量），将业务需求转化为数据模型与技术方案，主导或参与数据中台、数据仓库数据看板等核心数据应用的开发与落地。
3、熟练使用 Hive 构建数据仓库分层模型，编写高效HQL，具备Hive性能优化经验，基于Spark 进行大规模数据的分布式计算与处理，精通SparkCore、SparkSQL，具备丰富的性能调优（内存、Shuffle、SQL等）经验，具备核心代码性能调优和资源调度的丰富经验。
4、熟悉数据湖技术，有使用 Hudi 或 Paimon 等数据湖格式的实际项目经验，用于实现数据的增量更新、流批一体处理、构建近实时数仓等场景。
5、解决大数据平台运行中遇到的技术难题，持续跟踪大数据领域新技术，推动其在业务中的合理应用，并能够指导和培养初级工程师。
任职要求:
1、计算机科学或相关专业本科及以上学历，5年以上大数据开发经验。
2、熟练掌握 Scala 和/或 Java，具备良好的编程习惯和系统设计能力。
3、有制造业领域数据应用开发经验，熟悉以下一个或多个业务领域者优先（MES/QMS）。
4、具备良好的沟通能力和团队协作精神，能够承担压力，对解决具有挑战性的问题充满激情。
1、设计并开发高性能、高可靠的海量数据ETL/ELT管道，支撑制造业各类业务数据的接入、清洗、整合与计算。
2、深入理解制造业业务（如生产、质量），将业务需求转化为数据模型与技术方案，主导或参与数据中台、数据仓库数据看板等核心数据应用的开发与落地。
3、熟练使用 Hive 构建数据仓库分层模型，编写高效HQL，具备Hive性能优化经验，基于Spark 进行大规模数据的分布式计算与处理，精通SparkCore、SparkSQL，具备丰富的性能调优（内存、Shuffle、SQL等）经验，具备核心代码性能调优和资源调度的丰富经验。
4、熟悉数据湖技术，有使用 Hudi 或 Paimon 等数据湖格式的实际项目经验，用于实现数据的增量更新、流批一体处理、构建近实时数仓等场景。
5、解决大数据平台运行中遇到的技术难题，持续跟踪大数据领域新技术，推动其在业务中的合理应用，并能够指导和培养初级工程师。
任职要求:
1、计算机科学或相关专业本科及以上学历，5年以上大数据开发经验。
2、熟练掌握 Scala 和/或 Java，具备良好的编程习惯和系统设计能力。
3、有制造业领域数据应用开发经验，熟悉以下一个或多个业务领域者优先（MES/QMS）。
4、具备良好的沟通能力和团队协作精神，能够承担压力，对解决具有挑战性的问题充满激情。
查看全部
工作地点
潍坊奎文区歌尔光电园2期
热门公司推荐
- 霸王茶姬招聘
- 肯德基招聘
- 顺丰招聘
- 美团招聘
- 京东招聘
- 饿了么招聘
- 比亚迪招聘
- 中国一汽招聘
- 北京汽车招聘
- 蔚来招聘
- 东风汽车招聘
- 长城汽车招聘
- 奇瑞汽车招聘
- 理想汽车招聘
- 长鑫存储招聘
- 天江药业招聘
- 蓝月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 联想招聘
- 海康威视招聘
- 宁德时代招聘
- 中兴招聘
- 新松招聘
- 京东方招聘
- 申通招聘
- 圆通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麦当劳招聘
- 星巴克招聘
- 海底捞招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 腾讯招聘
- 百度招聘
- 快手招聘
- 字节跳动招聘
- 新华网招聘
- 小米招聘
- 招商银行招聘
- 中信银行招聘
- 北京银行招聘
- 兴业银行招聘
- 交通银行招聘
- 建发集团招聘
- 中国移动招聘
- 中国联通招聘
- 中国电信招聘
- 中粮集团招聘
- 国药控股招聘
- 中广核招聘
- 中国船舶招聘
- 强生中国招聘
- 汇丰中国招聘
- 宜家招聘
- 立邦中国招聘
- 伊利招聘
- 青岛啤酒招聘
- 京港地铁招聘
- 宝马招聘
- 小鹏汽车招聘
- 华为招聘
- 特斯拉招聘
- 吉利招聘
- 奔驰招聘
- 海尔招聘
- 美的招聘
- 京东方招聘
- 施耐德电气招聘
- 德邦物流招聘
职位发布者
高华光/人事经理
三日内活跃立即沟通
歌尔股份
歌尔股份有限公司成立于2001年6月，2008年5月在深交所上市，是全球布局的科技创新型企业，主要从事声光电精密零组件及精密结构件、智能整机、高端装备的研发、制造和销售，目前已在多个领域建立了综合竞争力。秉持一站式服务为客户创造更大价值的理念，歌尔深耕产业价值链上下游，已与消费电子领域的国际知名客户达成稳定、紧密、长期的战略合作关系。从上游精密元器件、模组，到下游的智能硬件，从模具、注塑、表面处理，到高精度自动线的自主设计与制造，歌尔打造了在价值链高度垂直整合的精密加工与智能制造的平台，为客户提供全方位服务。歌尔研发布局全球，在美国、日本、韩国、丹麦、北京、青岛、深圳、上海、南京、台湾等地分别设立了研发中心，以声光电为主要技术方向，通过集成跨领域技术提供系统化整体解决方案。我们一起创造We make it together我们是要用青春、生命，学习掌握现代一流科技，研究把握现代人内心需求，运用现代一流科技和深沉持久的爱心创造出具有卓越品质的声学、光学、微电子等产品，为人们的生活创造美好的声音、画面、创造美好的情怀、品德和生命形态等，让全世界所有与歌尔相关的客户、员工、股东、合作伙伴的生活因歌尔的存在而变得更加美好。>;秉持一站式服务为客户创造更大价值的理念，歌尔深耕产业价值链上下游，已与消费电子领域的国际一流客户达成稳定、紧密、长期的战略合作关系。从上游精密元器件、模组，到下游的智能硬件，从模具、注塑、表面处理，到高精度自动线的自主设计与制造，歌尔打造了在价值链高度垂直整合的精密加工与智能制造的平台，为客户提供全方位服务。>;歌尔研发布局全球。在美国、日本、韩国、丹麦、瑞典、北京、青岛、深圳、上海、南京、台湾等地分别设立了研发中心，以声光电为主要技术方向，通过集成跨领域技术提供系统化整体解决方案。>;我们一起创造 We make it together!
公司主页