更新于 2月5日

大数据研发工程师

2-2.5万
  • 北京海淀区
  • 5-10年
  • 本科
  • 全职
  • 招1人

职位描述

数据架构
一、核心技术栈要求
1.大数据计算与存储框架​
精通Spark、Flink,具备大规模数据计算与实时处理开发经验。
熟练掌握Hadoop、Hive、HBase,具备数据存储、查询与离线处理能力。
熟悉Kafka、Redis,具备高吞吐数据流处理与缓存设计经验。
2.数据仓库与数据集成​
熟悉OLAP数据库Doris,有实际性能优化经验者优先。
熟练使用SeaTunnel、DataX、Sqoop等进行数据同步与集成。
熟悉MySQL,具备数据库设计与调优能力。
3.编程语言​
精通Scala、Java,具备高性能、高并发系统开发经验。
二、平台与工具要求
1.任务调度与数据可视化​
熟练使用DolphinScheduler等调度工具,具备工作流设计与运维经验。
熟悉Superset、Metabase等BI工具,能够支持数据可视化需求。
2.数据治理与质量​
具备数据治理经验,熟悉数据清洗、标准化、元数据管理等流程。
了解数据管理平台或数据中台建设理念。
3.后端开发能力​
熟悉Spring Boot开发,能够支持数据服务化、API开发等相关需求。
三、运维与部署要求
1.容器化与云原生​
熟悉Docker、Kubernetes,具备容器化部署与运维经验。
2.操作系统与环境​
熟练使用Linux系统(CentOS/国产OS),具备脚本编写和系统调优能力。
四、经验与软性要求
1.项目经验​
8年及以上大数据开发经验,具备日处理十亿级数据、TB级存储的大型项目实战经验。
能够独立完成架构设计、性能优化与疑难问题排查。
2.加分项​
有国产化替代(如国产数据库、操作系统)经验者优先。
具备团队管理或技术架构规划经验者优先。

工作地点

北京海淀区千方大厦B座4层

职位发布者

于晴/人力资源经理

三日内活跃
立即沟通
公司Logo北京千方科技股份有限公司
千方科技(股票代码 002373.SZ)是国内领先的行业数字化产品和解决方案提供商,系交通新基建的推动者和践行者、车路协同技术路线的发起者和引领者、AIoT(人工智能物联网)领域全球排名第四的产品、解决方案与全栈式能力提供商。公司坚持技术引领,构建了从人工智能关键算法到智能传感器、从智能制造到智慧中枢、云边端贯穿的全产业链战略生态,积极推动多源异构数据在交通运输、交通管理、城市管理与服务等领域的汇聚、融合与应用,致力于以数字技术推动交通数字化升级、城市数字基础设施建设。公司2000年初创于北京中关村,2014年开启海外业务拓展,2015年在业内率先完成公、轨、航、水综合大交通业务布局,现有员工6500余人,产品和服务已覆盖亚洲、欧洲、非洲和美洲200多个国家和地区、3000多个城市,服务超过2000个行业头部客户,并在智慧交通、智慧物联多个细分领域持续保持技术和市场领先。注:近期,社会上出现不法分子利用“北京千方科技股份有限公司及其子公司”名义,通过诱导求职者下载手机应用程序或其他诈骗手段,采用线上试岗或完成任务等方式进行诈骗活动。我司在此声明,我司从未采取过上述方式开展招聘工作,上述行为与我司无任何关联,且已对我司的声誉及社会信任度造成严重损害。我司对此事非常重视,并郑重提醒广大求职者,应通过公司官方网站或官方认证的招聘平台进行求职活动,保持高度警觉,提升自我保护意识,避免成为诈骗行为的受害者。一旦遭遇诈骗或其他违法犯罪行为侵害,请立即向公安机关报案。公司更多信息请参考公司官网:http://www.ctfo.com
公司主页