该职位已失效,看看其他机会吧

数据挖掘与处理工程师

1.5-2.5万·15薪
  • 上海浦东新区
  • 3-5年
  • 本科
  • 全职
  • 招1人

职位描述

PhantomJS
岗位要求:
-负责全球公开新闻资讯站点、论坛、社交等公开数据的智能化采集与获取,应对大规模文本、图像、视频数据的采集、抽取,去重、分类,垃圾过滤,质量识别、解析入库等工作;
-负责各种开源网络数据的基本挖掘分析,参与数据服务产品研发;
-负责爬虫技术与反爬技术研究,快速响应业务需求;
-优秀的技术文档意识和维护能力;
任职要求:
-具有3年以上实际网络爬虫或分布式数据采集开发工作经验;
-精通熟悉爬虫原理及优化技术,熟悉主流爬虫框架使用;熟悉常见的反爬机制及应对策略,包括但不限于使用代理IP,验证码智能识别,动态JS数据解析等;
-熟悉各类应用网络协议知识,基本网络协议分析,熟悉基于Phantomjs、Headless、Selenium等无界面浏览器自动化交互采集技术;
-对数据结构和算法设计有较为深刻的理解;
-具有较强的编程能力,具备良好的编程习惯,能够编写高质量技术文档。
查看全部

工作地点

上海浦东新区张江国创中心一期-C4号楼

职位发布者

吕先生/HR

三日内活跃
立即沟通
公司Logo上海张江数学研究院
上海张江数学研究院(以下简称“数学院”)是事业单位性质的新型科研机构。数学院聚焦“数学+”,开展相关领域人才培养、科学研究、成果转化、产业化等。支撑上海国际科技创新中心、张江综合性国家科学中心和张江国家实验室建设,助推浦东新区高水平改革开放,打造社会主义现代化引领区建设,努力建设成为数学服务国家重大战略任务的国家队。
公司主页