雇员点评标签
职位描述
PythonJava数据清洗爬虫开发反爬虫分布式爬虫
岗位要求：
"1、本科及以上学历，计算机软件相关专业，6年以上互联网系统研发经验；
2、具备扎实的Java基础及分布式技术背景(RPC、缓存、消息系统等)
3、熟悉Python或Java爬虫开发，熟练使用Scrapy、Selenium等框架，有处理JS逆向、IP代理池及反爬对抗的实战经验。
4、具备良好的沟通能力与团队协作精神，执行力强。能够将业务需求转化为高效的技术方案。
5、有换电或物联网业务经验者优先，熟悉领域模型设计，或有过主导复杂业务系统及大规模分布式爬虫设计经验者极佳。"
2、具备扎实的Java基础及分布式技术背景(RPC、缓存、消息系统等)
3、熟悉Python或Java爬虫开发，熟练使用Scrapy、Selenium等框架，有处理JS逆向、IP代理池及反爬对抗的实战经验。
4、具备良好的沟通能力与团队协作精神，执行力强。能够将业务需求转化为高效的技术方案。
5、有换电或物联网业务经验者优先，熟悉领域模型设计，或有过主导复杂业务系统及大规模分布式爬虫设计经验者极佳。"
岗位职责：
"1、参与换电平台核心业务开发，涵盖用户增长、平台供给、设备管理等模块，并负责外部竞品数据、行业情报及运营数据的爬虫系统设计与开发。2、承担业务系统功能及爬虫框架的设计、开发与实现，攻克反爬策略(如验证码、动态加载等)，确保数据采集的高效性与稳定性。
3、制定合理的开发计划，撰写技术设计文档及数据抓取策略文档，保障代码与数据的质量。
4、保持积极负责的工作态度，以强自驱力推动项目进展，为团队注入正能量，主动解决业务与技术难题。"
展开该职位详情
