高级数据采集工程师

岗位职责：
通信协议分析与还原：负责主流互联网平台（Web/App/小程序）的通信协议逆向分析。通过静态分析与动态调试技术，还原数据传输的加密逻辑与签名算法，实现服务端对客户端协议的合法模拟与复现。
高可用采集架构建设：设计并维护高并发、分布式的自动化数据采集系统。解决大规模数据获取过程中的环境仿真、流量调度、异常检测处理及数据一致性问题，保障业务数据的连续稳定获取。
前端安全与对抗研究：深入研究目标平台的前端安全机制（如代码混淆、环境指纹、行为验证等），通过AST代码还原、虚拟化执行或原生协议模拟等技术手段，构建高拟真度的数据采集环境，确保在合规前提下提升采集成功率。
数据合规与风险控制：严格遵循《网络安全法》、《数据安全法》等法律法规，制定合规的数据采集策略。建立风控预警机制，确保采集行为仅针对公开数据，不侵犯用户隐私，不突破系统安全防护底线。
技术工具链研发：主导内部通用数据采集框架、自动化协议分析工具的研发，沉淀技术资产，提升团队整体技术效能。
任职资格
学历背景：计算机、信息安全、数学等相关专业本科及以上学历，3年以上数据采集、协议分析或相关安全研究经验。
编程能力：精通 Python (Asyncio, Scrapy)，熟练掌握 Go/Java/C++ 中至少一门，具备高性能网络编程能力。
Web协议分析能力：
精通浏览器内核原理，熟练使用 DevTools, Fiddler, Charles, Wireshark 等抓包分析工具。
具备深厚的 JavaScript 功底，能独立分析混淆代码，熟悉使用 AST (抽象语法树) 进行代码解密与逻辑还原。
熟悉常见加密算法（AES, RSA, ECC等）原理，具备算法逻辑复现能力。
移动端逆向能力：
熟悉 Android/iOS 系统架构，熟练使用 Jadx, IDA Pro, Ghidra, Frida, Xposed 等工具进行动态调试与逻辑分析。
能够分析 Native层 (So库) 逻辑，理解设备指纹生成机制，并能通过技术手段模拟合法的设备运行环境。
工程化与架构：
精通 Redis, Kafka, MongoDB, ClickHouse 等中间件应用。
熟悉 Docker, K8s 容器化部署，有大规模代理资源调度与账号资源管理经验者优先。
深入理解 TLS/SSL 协议，有 JA3指纹模拟 或 HTTP2/QUIC 协议优化经验者优先。