更新于 1月5日

数据研发工程师(广州)

1-1.5万
  • 广州天河区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

SQLKafkaRedisJavaPythonC语言数据架构数据治理
岗位职责:
1. 移动云数据迁移,基础任务提速50%。
2. 新平台数据融合,优化基础数据计算。
3. 日常常规报表支撑,需求提速及优化,提升数据支撑速度。
岗位要求:
1.使用Java、Scala、C语言开发项目,熟悉jvm、gc工作原理
2.熟悉Linux及大数据生态圈相关组件,使用Ambari搭建高可用集群环境
3.使用Hadoop、Hbase、flink、Spark、Kafka、Zookeeper、MySQL组件进行公司项目开发
4.熟悉Hadoop中的MapReduce、HDFS、Yarn工作原理,掌握HBase的内部原理及优化
5.熟练使用Redis、MySQL、pg、达梦数据库,了解Hive仓库,使用SQL、HQL语句进行统计分析
6.熟悉Spark工作原理及常用的算子,使用Spark-streaming、Spark-Sql、mlib及echarts的使用
7.熟悉Zookeeper及Kafka消息中间件工作原理,并使用Kafka和Spark集成开发
8.使用ElasticSearch搜索服务器,并参与es的部署与优化
9.熟悉datax、flinkx、sqoop数据迁移工具
10.熟悉web开发相关的Spring、SpringMVC、MyBatis、Quartz等框架,掌握springBoot微服务项目框架
11.了解Flume工作原理、使用场景、集群搭建及预处理开发
12.要有一点运维经验

工作地点

广州天河区中国移动互联网有限公司

职位发布者

吕女士/HRBP

当前在线
立即沟通
公司Logo新讯数字科技(杭州)有限公司北京分公司
新讯数字科技(杭州)有限公司(简称“新讯”、“EB”),曾用名“杭州东信北邮信息技术有限公司”,由北京邮电大学廖建新教授以其主持研发的移动智能网核心技术为基础,于2000年2月创建。公司现有员工约1800人,在全国二十多个省、自治区、直辖市设立了分公司/办事处,拥有投资近4000万元的大型系统实验室。经过二十余年拼搏,已形成了立体化产品矩阵,覆盖核心网络通信、高性能媒体处理、大数据与AI、通信安全、物联网等DICT领域,为现网近10亿用户提供电信级服务。目前,公司已经成为国内运营商的重要战略合作伙伴和移动通信领域的主要支撑厂商。
公司主页