大数据开发工程师

工作职责
1. 负责互联网新零售场景下多源数据的采集工作，包括商品信息、用户行为、市场动态等结构化与非结构化数据。
2. 设计并优化数据采集方案，运用爬虫工具、API接口等技术手段提升数据采集的效率与准确性。
3. 监控数据采集流程，及时处理异常数据，保障数据的完整性与时效性。
4. 协助数据团队完成数据清洗与预处理，为后续数据分析提供高质量的原始数据支撑。
任职要求
1. 大专及以上学历，计算机、统计学、信息管理等相关专业优先。
2. 掌握至少一种数据采集工具（如Python爬虫框架、八爪鱼等），熟悉HTTP协议、HTML解析及API调用。
3. 具备数据清洗与数据质量校验的基础能力，能识别并处理重复、缺失、异常数据。
4. 了解互联网新零售行业数据特点，有电商、零售类数据采集经验者优先。
5. 具备良好的问题解决能力与责任心，能独立完成数据采集任务并输出结果。