爬虫工程师

1、本科及以上统招学历、计算机或相关专业、具备2年以上项目开发经验;
具有scrapy scrapy-redis开发经验;
具有web逆向经验,如滑块验证码，
熟悉多线程、网络编程，精通网页抓取原理及技术，精通正则表达式;
熟悉并熟练应用各种常见加密算法;熟悉至少一种关系型数据库(MVSOL等);熟悉redis、kakfka,有过数据库调优和海量数据存储经验优先具有工商数据、金融数据、案件数据抓取经验者优先。