登录/注册
我要招人
400-885-9898
首页
职位推荐
城市频道
政企招聘
校园招聘
高端职位
海外招聘
测评及培训
职Q社区
更新于 1月5日
APP
举报
python爬虫工程师
7000-12000元
郑州
中原区
3-5年
本科
全职
招1人
收藏
立即投递
职位描述
互联网
职位描述:
1、负责网络爬虫系统平台的架构设计与开发(如抓取调度,多样化抓取,页面解析和结构化抽取)、技术选型;
2、研究爬虫策略和防屏蔽规则,解决封账号、封IP、验证码、混淆加密,算法还原,so层,页面跳转等难点攻克,提升网页抓取的效率和质量;
3、对抓取后的数据进行清洗、存储等,并持续优化平台,以便满足各种爬取业务需求。
岗位要求:
1. 精通Linux/UNIX,精通Python语言,至少熟练掌握主流爬虫框架中的一种;
2. 了解各种加密算法,在破解验证码方面有丰富经验,能够独立解决js反爬和模拟登陆问题;
3. 熟练掌握正则表达式、XPath、CSS等网页信息抽取技术;
4. 熟悉常见反爬机制,验证码识别,IP代理池、应用Ip池、headers认证和cookie等;
5. 熟练掌握应用Selenium、PhantomJS、Splash、Puppeteer实施动态抓取;
6. 熟悉熟练使用charles、fiddler等抓包工具者优先;
7. 熟悉数据清洗,能够用numpy、pandas、jieba等工具对数据进行处理者优先;
8. 熟悉mysql、mongodb、redis、rabbitMQ、kafka、spark者优先;
工作地点
郑州中原区光合大厦
查看地图
完善一份简历
1736万+企业在线搜索,780万+海量职位精准推荐
完善简历 涨薪36%
相似职位
Python开发工程师
1-1.5万
郑州
- 中原
山东永川科技有限公司郑州分公司
Python开发工程师
9000-14000元
郑州
- 中原
北京合众伟奇科技股份有限公司
python后端开发工程师
7000-12000元
郑州
- 金水
河南创想领航数据科技有限公司
后端开发工程师 (Python)
1-1.5万
郑州
- 中原
郑州信大先进技术研究院
Python开发工程师
1.1-1.3万
郑州
- 金水
河南容鑫信息科技发展有限公司
Python讲师
1.2-2万
郑州
- 金水
河南奇酷信息科技有限公司
查看更多相似职位
热门城市推荐
北京
上海
深圳
广州
天津
成都
杭州
武汉
大连
长春
南京
济南
青岛
苏州
沈阳
西安
郑州
长沙
重庆
哈尔滨
无锡
宁波
福州
厦门
石家庄
合肥
惠州
太原
南昌
昆明
热门职位推荐
驾驶招聘
奥迪招聘
地铁安检招聘
车工招聘
阿里招聘
酒店前台招聘
必胜客招聘
骑手招聘
厨师招聘
叉车工招聘
服务员招聘
安全员招聘
滴滴招聘
保洁招聘
技工招聘
货运司机招聘
喷塑工招聘
家政招聘
电工招聘
普工招聘
花艺师
统计员
数据开发
Ruby
电商产品经理
机械设备经理
工业工程师
催收员
游戏策划
英语教师
热门公司推荐
霸王茶姬招聘
肯德基招聘
顺丰招聘
美团招聘
京东招聘
饿了么招聘
比亚迪招聘
中国一汽招聘
北京汽车招聘
蔚来招聘
东风汽车招聘
长城汽车招聘
奇瑞汽车招聘
理想汽车招聘
长鑫存储招聘
天江药业招聘
蓝月亮招聘
安踏招聘
TCL招聘
海信招聘
联想招聘
海康威视招聘
宁德时代招聘
中兴招聘
新松招聘
京东方招聘
申通招聘
圆通招聘
中通招聘
百世物流招聘
德邦物流招聘
麦当劳招聘
星巴克招聘
海底捞招聘
蜜雪冰城招聘
瑞幸招聘
雀巢招聘
腾讯招聘
百度招聘
快手招聘
字节跳动招聘
新华网招聘
小米招聘
招商银行招聘
中信银行招聘
北京银行招聘
兴业银行招聘
交通银行招聘
建发集团招聘
中国移动招聘
中国联通招聘
中国电信招聘
中粮集团招聘
国药控股招聘
中广核招聘
中国船舶招聘
强生中国招聘
汇丰中国招聘
宜家招聘
立邦中国招聘
伊利招聘
青岛啤酒招聘
京港地铁招聘
宝马招聘
小鹏汽车招聘
华为招聘
特斯拉招聘
吉利招聘
奔驰招聘
海尔招聘
美的招聘
京东方招聘
施耐德电气招聘
德邦物流招聘
职位发布者
仝先生/人事主管
立即沟通
仝先生 / 人事主管
Hi~ 对职位感兴趣吗?快来下载智联APP和我聊聊吧,还能在线视频面试,方便又安心~
河南初安科技服务有限公司
企业服务
20-99人
未融资
河南初安科技服务有限公司,是一家针对汽车后市场拥有技术优势和成熟解决方案的科技服务公司。公司以实事求是的发展理念,结合保险行业主体的实际情况,为保险公司、汽车后市场服务公司提供完善的、可定制的包含售前、售中、售后的闭环解决方案。
公司主页