python爬虫工程师

岗位职责
1．根据产品需求,对电网各个省份的oms、双细则等网站进行数据抓取
2．开发并维护内网环境下的API服务、实现任务调度与远程设备协同及设备上相关爬虫；
3．根据实际情况,对中心端爬虫框架进行优化。
4．持续优化爬虫稳定性、性能及可扩展性，快速适配新市场接入需求
任职要求
1．精通python语言和常见开发框架, 熟悉Scrapy, selenium等主流爬虫相关框架, 熟悉代理技术及应用
2．熟练掌握常见的加密算法（如 AES、RSA、SM2 等）及其应用场景
3．具备逆向分析能力，能够处理 Webpack 加密、混淆、瑞数等常见防护手段
4．具备使用主流框架（如FastAPI、Flask、Django）构建高效、稳定的API服务的经验
5．熟悉Git版本控制，熟悉Docker容器技术 6．熟练使用mysql、redis数据库