400-885-9898
雇员点评标签
职位描述
Python爬虫开发反爬虫分布式爬虫数据清洗数据采集
工作内容：
1、参与爬虫系统的架构设计和开发，负责指定网页及APP数据采集研发工作
2、参与爬虫核心算法的策略优化，设计爬虫策略及反爬规则，提升数据采集效率和稳定性
3、能够根据业务需求，实现页面解析和结构化抽取，数据清洗、海量数据存储和读取等。
任职要求：
1、计算机相关专业，1年以上爬虫开发经验
2、熟悉tcp，http协议原理；熟练掌握python开发，至少熟练掌握主流爬虫框架中的一种，熟悉常用的库requests/gevent等。熟悉常用的数据结构和算法。
3、熟悉常见的反爬虫技术及其解决方案，熟悉JavaScript开发及逆向经验，或有Android/IOS 端的采集和逆向经验
4、了解Mysql、MongoDB，Redis、hive数据存储读取技术，能够熟练使用一种数据库相关技术
5、具有良好的自学能力，能通过研究开源项目来解决开发中遇到的难题。
6、有责任心、敢于担当，工作积极主动，具备良好的团队合作精神，能融入多功能团队，并与其他部门同事进行良好的沟通及合作。
查看全部
工作地点
北京海淀区百度科技园百度科技园K1
相似职位
- 爬虫工程师7000-14000元
北京 - 大兴
北京法宣在线科技有限公司 - 爬虫开发工程师1-1.5万
北京 - 朝阳
北京互联新世纪科技有限公司 - python爬虫工程师8000-14000元
北京 - 海淀
北京信达华方科技有限公司 - python爬虫开发工程师1.2-1.3万
北京 - 海淀
博彦科技承德有限公司 - 爬虫工程师1.6-1.9万
北京 - 顺义
软通动力信息技术(集团)股份有限公司 - 高级python爬虫工程师1.5-2.5万
北京 - 朝阳
位来小猎(宁波)信息技术有限公司
热门公司推荐
- 霸王茶姬招聘
- 肯德基招聘
- 顺丰招聘
- 美团招聘
- 京东招聘
- 饿了么招聘
- 比亚迪招聘
- 中国一汽招聘
- 北京汽车招聘
- 蔚来招聘
- 东风汽车招聘
- 长城汽车招聘
- 奇瑞汽车招聘
- 理想汽车招聘
- 长鑫存储招聘
- 天江药业招聘
- 蓝月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 联想招聘
- 海康威视招聘
- 宁德时代招聘
- 中兴招聘
- 新松招聘
- 京东方招聘
- 申通招聘
- 圆通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麦当劳招聘
- 星巴克招聘
- 海底捞招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 腾讯招聘
- 百度招聘
- 快手招聘
- 字节跳动招聘
- 新华网招聘
- 小米招聘
- 招商银行招聘
- 中信银行招聘
- 北京银行招聘
- 兴业银行招聘
- 交通银行招聘
- 建发集团招聘
- 中国移动招聘
- 中国联通招聘
- 中国电信招聘
- 中粮集团招聘
- 国药控股招聘
- 中广核招聘
- 中国船舶招聘
- 强生中国招聘
- 汇丰中国招聘
- 宜家招聘
- 立邦中国招聘
- 伊利招聘
- 青岛啤酒招聘
- 京港地铁招聘
- 宝马招聘
- 小鹏汽车招聘
- 华为招聘
- 特斯拉招聘
- 吉利招聘
- 奔驰招聘
- 海尔招聘
- 美的招聘
- 京东方招聘
- 施耐德电气招聘
- 德邦物流招聘
职位发布者
周翠英/人事经理
立即沟通
中电金信软件有限公司中电金信，是中国电子旗下成员企业，通过持续研发创新，参与国家重大工程，依托行业场景，构建金融级数字底座，打造全栈全域解决方案，提供领先的咨询、软件产品及开发、质量安全保障及运营服务，为金融及重点行业数智化转型及安全发展提供强大动能，并以中国数智化转型最佳实践服务全球。我们推崇开放包容的文化。在中电金信，你将和同样拥有热情和梦想的优秀队友一起合作、交流和学习，稳扎稳打不断提升，和团队一起助力国家重大工程项目。我们为你提供清晰的职业路径和不设限的发展机会，你将通过不同类型的项目不断成长，获得前所未有的荣耀感和使命感，和我们一起去创造数字时代的美好未来。
公司主页