岗位职责:
1、负责网络爬虫产品的研发工作;
2、负责网络爬虫采集规则的编写;
3、解决网页抓取,信息抽取等问题,构建高可用性,高扩展性网络信息采集平台;
4、解决验证码,封账号,js混淆,图片识别,封IP采集等难点攻克。
职位要求:
1、本科及以上学历,计算机、信息技术等相关专业;
2、熟悉主流的python爬虫框架,如pyspider,scrapy等;
3、熟悉使用Sqlserver、MongoDB、Redis等关系型与非关系型数据库,掌握SQL与NoSQL数据库调优;
4、一年以上大规模网页爬虫开发经验,熟悉Linux平台,有分布式爬虫架构经验者优先;
5、强烈的责任心和良好的团队合作能力。
公司福利:
—工作时间:8:30-17:30,弹性打卡,周末双休;
—五险一金、午餐补贴,电话补贴、交通补贴及其他节日现金福利等;
—集团化公司,发展平台优异,晋升空间大;
—免费定期体检;
—节假日活动及福利;
—带薪年休假;
—团建活动及旅游;
—丰富多彩的员工活动,如运动会、户外拓展、生日会、迎新会、主题活动会(包括圣诞节、年会)、篮球队,羽毛球队,摄影队、书法社等;
—丰富的培训形式及培训机会,如干部研修班、鸿鹄青年会、内训师等;