python爬虫工程师

1. 熟练掌握Python，熟悉常用的爬虫框架（如Scrapy、BeautifulSoup、Selenium、Requests等）。
2. 熟悉常见的反爬机制（如IP封禁、验证码、动态加载、JavaScript渲染等），有丰富处理反爬机制的经验。
3. 熟悉MySQL、Oracle等数据库，能够进行高效的数据存储和管理。
4. 熟悉HTML、CSS、JavaScript，能够解析网页结构和动态加载内容
5. 了解HTTP/HTTPS协议，熟悉Cookie、Session、Token等机制。
6. 具备良好的法律意识，遵守相关法律法规和网站的使用条款。
7. 有使用Docker、Kubernetes等容器化技术部署爬虫系统经验的优先