python爬虫开发工程师

岗位内容:
1. 设计和开发符合业务需求的爬虫系统，实现数据采集；
2. 优化爬虫程序，提升数据采集效率和准确性，保证数据的完整性和正确性；
任职要求：
1、有进行爬虫或网页自动化任务的经验，熟练掌握 Python 、gol或其他主流编程语言；
2、熟悉JavaScript、HTML以及浏览器开发工具，用于定位和提取动态元素；
3、熟悉爬虫最佳实践，包括IP轮换、代理管理及规避反爬虫检测；
4、能处理动态内容、AJAX等前端技术对数据抓取的影响；
5、熟练掌握常见爬虫工具及数据处理库；
6、具备网络基础知识或有管理、操作网络设备的经验者优先；
7、了解登录流程、会话管理，以及使用localStorage或Cookie进行数据管理；
8、注重细节，确保数据的准确性和稳定性；
优先条件：
1、有路由器配置界面或网络管理工具的相关经验；
2、熟悉API及通过RESTful接口提取数据（如路由器支持此类接口）；
3、具备较强的排查及解决Selenium脚本问题的能力；