更新于 3月23日

数据库开发工程师

1.5-2.5万
  • 杭州富阳区
  • 5-10年
  • 本科
  • 全职
  • 招1人

职位描述

Python
岗位职责
1. 以Python为核心开发语言,负责数据湖仓体系的设计、开发与优化,,运用Python脚本实现数据相关自动化开发,支撑多场景大屏数据展示需求,保障数据口径统一、时效达标。
2.负责MySQL(前置数据源)、Doris等数据库的日常运维、监控与性能调优,运用Python编写运维脚本、自动化监控工具,完成表结构设计、索引优化、SQL语句优化。
3.负责数据ETL流程开发与维护,基于Python结合Spark、DolphinScheduler调度平台,编写ETL脚本实现数据的抽取、清洗、转换、加载,对接埋点系统(神策SDK、EMQX Webhook)及穿戴设备数据。
4.配合BI系统(DataEase)的开发与迭代,使用Python处理数据预处理、异常排查,提供精准、高效的数据支撑,协助完成大屏可视化数据的调试与优化,确保数据展示准确无误。
5. 负责数据库脚本、ETL任务、数据模型的版本管理与备份(基于云效Git仓库),运用Python编写备份、恢复自动化脚本,制定并执行数据备份、恢复策略,保障数据安全与可追溯。
6.对接业务侧需求,梳理数据逻辑,使用Python进行数据探查、分析,设计合理的数据模型,支撑穿戴设备生命体征数据、埋点数据等多类型数据的采集、存储与分析需求,输出数据解决方案。
7.跟踪Python在数据领域的新技术、新方案(如Python数据处理库、自动化工具),结合项目实际场景引入优化,持续提升数据处理效率、系统稳定性与可扩展性,推动数据湖仓体系的迭代升级。
任职要求
硬性要求
1.本科及以上学历,计算机、软件工程、数据相关专业,5年及以上数据库开发、数据湖仓相关工作经验,具备扎实的Python编程基础,有丰富的Python数据处理、脚本开发经验。
2. 熟练掌握Python核心语法,熟悉Pandas、NumPy等数据处理库,能运用Python编写高效的数据处理、自动化运维脚本;
3.熟悉Apache Doris数据库,掌握Doris FE/BE节点部署、运维与优化,能熟练使用Doris Studio进行查询编辑,了解MPP架构原理,具备Doris数据导入、查询优化经验。
4. 掌握ETL开发流程,熟悉Python结合Spark、DolphinScheduler等大数据组件的使用,能独立用Python开发、调度ETL任务,实现数据的高效处理与流转,了解Flink CDC等数据同步技术者优先。
5.了解数据湖仓架构理念,具备数据建模、数据治理基础,能使用Python进行数据探查、建模辅助,能根据业务需求设计合理的数据模型,支撑多场景数据应用,有相关项目落地经验者优先。
6.熟悉Git版本控制,能规范管理Python代码、脚本与配置文件,具备良好的代码编写规范与文档撰写习惯。

工作地点

杭州富阳区浙江全至电子科技有限公司2号楼

认证资质

营业执照信息

职位发布者

蒋女士/HR

昨日活跃
立即沟通
公司Logo浙江田螺云厨科技有限公司
田螺云厨是一家基于先进的一体化智能厨房机器人产品,和同类领先技术的科技型公司。我们的一体化厨房机器人在欧美市场有广泛的客户群体,历经市场考验,年销售额超过2亿元。田螺云厨致力于将更优质的厨房体验带给中国的千家万户。
公司主页