更新于 11月21日

爬虫工程师

面议
  • 北京昌平区
  • 3-5年
  • 本科
  • 全职
  • 招1人

雇员点评标签

  • 同事很nice
  • 工作环境好
  • 人际关系好
  • 氛围活跃
  • 免费班车
  • 团队执行强

职位描述

Python数据采集反爬虫Scrapy
【岗位要求】
1. 本科以上学历,3-5年相关工作经验,拥有一个或多个电力、能源行业数据系统开发实施经验,有相关信息系统业务设计经验;
2.熟练掌握python语言;用过至少一种爬虫框架,如scrapy、feapder等,具备自研爬虫框架经验者优先考虑。
3.熟练掌握SQL语言及至少一种关系型数据库,熟练掌握Redis。
4.熟练掌握至少一种自动化测试框架,例如playwright、selenium、chromedp等。
5.有web系统逆向工程经验及反爬虫经验者优先考虑。
6.具备基础的运维能力。
【岗位职责】
1.参与分布式数据采集平台的架构设计与研发落地。
2.负责和产品进行需求对接,开发数据采集脚本。
3.负责现有数据采集平台和爬虫脚本的维护工作,保证数据稳定、高效的采集。

工作地点

北京昌平区国家电投集团中央研究院

职位发布者

徐女士/HR

三日内活跃
立即沟通
公司Logo科大国创软件股份有限公司
科大国创是国内领先的数据智能技术研发和应用的高科技上市企业(股票代码:300520),致力于打造软硬件一体化的智能产品,提供以云平台为基础的IT整体解决方案与服务。经过二十余年的努力,公司已成为大数据研发和应用的国家队,数据智能技术与实践的领先者,高可信软件研发及推广的创新者。科大国创源自中国科学技术大学,拥有一支高水平的研发团队,发挥多年积累的软件与大数据技术和深厚的行业经验优势,抓住人工智能发展契机,积极开展数据智能技术的研发和应用,构建领先的数据智能核心技术,赋能各行业领域客户专属的数据智能能力,推动国家以数据为驱动的数智化转型。科大国创坚持以内生发展和外延扩张相结合,高瞻远瞩的制定了“智慧+”、产品引领、平台驱动的发展战略,围绕数据智能行业应用、智能软硬件产品、数据智能平台运营三大业务板块,持续加强数据智能与行业融合,为运营商&政企(能源、交通、金融、公安、政府等),智能汽车、智慧物流等优势行业领域的数智化转型、高质量发展提供有力支撑,拥有了一批国内/国际世界500强企业和政府等高端客户。多年来,科大国创先后获得CMMI5级认证、系统集成一级、智能化甲级、国家规划布局内重点软件企业、国家高新技术企业、国家企业技术中心、国家博士后科研工作站、国家数字经济试点重大工程、国家2020年“重大自然灾害检测预警与防范”重点专项、中国政务信息化方案案例创新奖等高端资质、认证和荣誉,极大地提高了公司的综合竞争力,为公司卓越发展打下良好基础。“十四五”时期,科大国创将继续秉承“务实、创新”的精神,肩负“软件兴企报国,创新引领未来”的伟大使命,着力打造一支技术领先、业务精湛的复合型高素质团队,努力成为数据智能领域的引领者,奋力实现百亿国创的目标,为国家从数字化到数智化的转型作出贡献!
公司主页