大数据开发工程师

1、负责数据清洗、ETL 任务，编写高效脚本处理结构化数据。
2、优化离线 / 实时数据处理流程，提升任务执行效率。
3、开发分布式计算程序（如 Spark/Flink），处理海量数据。
4、设计数据接口，支持业务方数据需求。
5、会分布式爬虫技术。

【岗位要求】

1、精通 Spark，熟悉 Flink 者优先；
2、熟练掌握 Scala/Java/Python 至少一种开发语言；
3、必须具备供应链相关项目数据开发经验，旅游行业背景优先；
4、具备离线数仓从 0 到 1 建设经验，熟悉分层建模与复杂模型设计；
5、有 BI 报表开发经验（永洪/帆软等）者加分；
6、熟练掌握 SQL 及性能优化，有 StarRocks/Doris/Greenplum/Oracle 等经验者优先；
7、熟悉 Iceberg 或有数据湖实践经验者优先。
8、至少会一种分布式爬虫技术。