400-885-9898
雇员点评标签
职位描述
计算机软件
一、工作职责
1. 负责设计、开发、优化网络爬虫系统，采集并处理海量数据；
2. 研究并解决反爬技术，确保数据采集的稳定性和高效性；
3. 监控数据质量，清洗、存储和分析爬取的数据；
4. 维护和优化已有爬虫，提升爬取效率与数据准确性；
5. 研究最新的爬虫技术、分布式爬取、动态页面解析等，提升整体抓取能力；
6. 处理封禁、验证码、IP 限制等问题，优化爬取策略；
二、任职要求
1. 本科或以上学历，计算机、软件工程等相关专业，2年以上工作经验；
2. 至少熟练使用一门编程语言：GO、PHP、JAVA、python等，具有良好的编程习惯，扎实的编程基础；
3. 具备分布式爬虫开发经验，熟练掌握相关爬虫框架，熟悉 HTTP 协议、网页解析技术、动态页面爬取方法；
4. 熟悉常见的反爬机制，掌握代理 IP 轮换、验证码识别、User-Agent 伪装等绕过技术；
5. 具备数据清洗、存储、处理的能力，熟悉 MySQL、MongoDB、Elasticsearch 等数据库；
6. 具有良好的代码规范和团队合作精神，责任心强，善于沟通。
查看全部
工作地点
成都武侯区高新万科大厦
相似职位
- 爬虫工程师 (MJ000737)1.6-2.5万
成都 - 双流
中国网安 - 初级AI爬虫工程师1-1.5万
成都 - 青羊
掌起(成都)供应链管理有限公司 - 爬虫工程师1.2-1.8万
成都 - 成华
南京迈特望科技股份有限公司
热门公司推荐
- 霸王茶姬招聘
- 肯德基招聘
- 顺丰招聘
- 美团招聘
- 京东招聘
- 饿了么招聘
- 比亚迪招聘
- 中国一汽招聘
- 北京汽车招聘
- 蔚来招聘
- 东风汽车招聘
- 长城汽车招聘
- 奇瑞汽车招聘
- 理想汽车招聘
- 长鑫存储招聘
- 天江药业招聘
- 蓝月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 联想招聘
- 海康威视招聘
- 宁德时代招聘
- 中兴招聘
- 新松招聘
- 京东方招聘
- 申通招聘
- 圆通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麦当劳招聘
- 星巴克招聘
- 海底捞招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 腾讯招聘
- 百度招聘
- 快手招聘
- 字节跳动招聘
- 新华网招聘
- 小米招聘
- 招商银行招聘
- 中信银行招聘
- 北京银行招聘
- 兴业银行招聘
- 交通银行招聘
- 建发集团招聘
- 中国移动招聘
- 中国联通招聘
- 中国电信招聘
- 中粮集团招聘
- 国药控股招聘
- 中广核招聘
- 中国船舶招聘
- 强生中国招聘
- 汇丰中国招聘
- 宜家招聘
- 立邦中国招聘
- 伊利招聘
- 青岛啤酒招聘
- 京港地铁招聘
- 宝马招聘
- 小鹏汽车招聘
- 华为招聘
- 特斯拉招聘
- 吉利招聘
- 奔驰招聘
- 海尔招聘
- 美的招聘
- 京东方招聘
- 施耐德电气招聘
- 德邦物流招聘
职位发布者
田茹娟/HR
三日内活跃立即沟通
中电金信软件有限公司中电金信，是中国电子旗下成员企业，通过持续研发创新，参与国家重大工程，依托行业场景，构建金融级数字底座，打造全栈全域解决方案，提供领先的咨询、软件产品及开发、质量安全保障及运营服务，为金融及重点行业数智化转型及安全发展提供强大动能，并以中国数智化转型最佳实践服务全球。我们推崇开放包容的文化。在中电金信，你将和同样拥有热情和梦想的优秀队友一起合作、交流和学习，稳扎稳打不断提升，和团队一起助力国家重大工程项目。我们为你提供清晰的职业路径和不设限的发展机会，你将通过不同类型的项目不断成长，获得前所未有的荣耀感和使命感，和我们一起去创造数字时代的美好未来。
公司主页