职位描述
SparkPythonflumehive
岗位职责:
1.负责企业级数据中台架构设计与核心模块开发,支撑全域数据资产化;
2.搭建高可用数据管道(ETL/ELT),完成多源异构数据采集、清洗与标准化处理;
3.主导数据仓库建模(维度建模/Data Vault),优化数据分层存储与计算性能;
4.设计数据服务化接口(API/数据沙箱),支持业务部门自助分析需求;
5.制定数据治理规范(元数据/数据质量/血缘追踪),保障数据资产可管可控;
6.协同算法团队构建数据应用场景(用户画像/实时大屏/智能风控)。
任职要求:
1.统招本科及以上学历,计算机/统计相关专业,3年以上数据开发经验;
2.精通Hadoop/Spark/Flink生态圈,具备TB级数据处理及性能调优经验;
3.熟练使用SQL/Python/Scala,掌握DolphinScheduler等调度工具;
4.熟悉数据仓库技术(Kimball理论/数据湖架构),有Hive/ClickHouse/StarRocks实战经验;
5.了解数据治理框架(Apache Atlas/DataHub),熟悉数据安全管控方案;
6.具备云平台(AWS/阿里云数据工场)开发经验,掌握Kafka/Pulsar流处理技术。
优先条件:
1.有数据中台从0到1搭建经验,熟悉OneData方法论;
2.掌握实时数仓(Flink CDC/Doris)或湖仓一体架构(Iceberg/Hudi);
3.熟悉DataOps理念,有DataMesh架构实践经验;
4.了解主流BI工具(Tableau/FineBI)或数据建模工具(PowerDesigner/Erwin)。
1.负责企业级数据中台架构设计与核心模块开发,支撑全域数据资产化;
2.搭建高可用数据管道(ETL/ELT),完成多源异构数据采集、清洗与标准化处理;
3.主导数据仓库建模(维度建模/Data Vault),优化数据分层存储与计算性能;
4.设计数据服务化接口(API/数据沙箱),支持业务部门自助分析需求;
5.制定数据治理规范(元数据/数据质量/血缘追踪),保障数据资产可管可控;
6.协同算法团队构建数据应用场景(用户画像/实时大屏/智能风控)。
任职要求:
1.统招本科及以上学历,计算机/统计相关专业,3年以上数据开发经验;
2.精通Hadoop/Spark/Flink生态圈,具备TB级数据处理及性能调优经验;
3.熟练使用SQL/Python/Scala,掌握DolphinScheduler等调度工具;
4.熟悉数据仓库技术(Kimball理论/数据湖架构),有Hive/ClickHouse/StarRocks实战经验;
5.了解数据治理框架(Apache Atlas/DataHub),熟悉数据安全管控方案;
6.具备云平台(AWS/阿里云数据工场)开发经验,掌握Kafka/Pulsar流处理技术。
优先条件:
1.有数据中台从0到1搭建经验,熟悉OneData方法论;
2.掌握实时数仓(Flink CDC/Doris)或湖仓一体架构(Iceberg/Hudi);
3.熟悉DataOps理念,有DataMesh架构实践经验;
4.了解主流BI工具(Tableau/FineBI)或数据建模工具(PowerDesigner/Erwin)。
工作地点
西安未央区天地时代广场-A座

公司信息
公司介绍
新疆北斗同创信息科技有限公司成立于2014年,是一家国家级专精特新重点“小巨人”企业,也是乌鲁木齐市唯一入选第六批工信部认证名单的行业标杆。公司注册资本达5000万元,拥有300余名高素质员工,专注于信息系统集成与智能运维服务,业务覆盖智慧公安、边防、医疗、交通、水利、农业等九大领域,为政府及企业提供全方位数字化解决方案。致力成为全国领先的智慧城市信息化资产优化配置服务提供商。公司技术实力雄厚,自主研发的人工智能运维管理平台荣获2023年中国创新创业大赛(新疆赛区)一等奖,通过智能算法将故障排查时间缩短83%,运维成本降低30%,累计检测设备超4000台,创造产值超7000万元,疆内市场占有率22.93%,稳居行业首位。公司资质卓越,获高新技术企业认定及CS三级、ITSS二级、CMMI-5级等十余项权威认证,连续八年跻身全国“安防百强工程商”。累计拥有发明专利11项、实用新型专利4项、软件著作权百余项,彰显创新硬实力。此外,公司积极履行社会责任,公益捐助超800万元,在脱贫攻坚、抗疫救灾等领域贡献突出。
工商信息
企业名称 新疆北斗同创信息科技有限公司
企业类型 有限责任公司(自然人投资或控股)
法人代表 景韶华
经营状态 存续
成立时间 2014-04-30
注册资本 5000万元
认证资质
营业执照信息

更新于 今天


