更新于 2月7日

python工程师(爬虫)

1-1.5万
  • 宁波鄞州区
  • 1-3年
  • 本科
  • 全职
  • 招1人

职位描述

数据分析数据库大数据爬虫PYTHON
岗位职责:
1、负责公司数据源抓取需求,满足公司对多源数据采集要求;
2、负责开发分布式爬虫框架,管理分布式爬虫服务器,开发任务调度引擎;
3、负责爬虫核心算法的策略优化研究,提升爬虫抓取效率和质量,提升网页抓取的效率和质量;
4、设计爬虫策略和防屏蔽规则,解决封账号、封IP、验证码、JS加密等难点攻克;
5、利用主流的大数据相关技术,对抓取后的网页数据进行清洗、存储等;并持续优化平台,以便满足各种爬取业务需求;
6、负责RPA相关开发工作,提升业务能效;
7、负责部分AI(RAG)相关开发工作。
岗位要求:
1、有扎实的数据结构和算法功底;
2、工作认真细致踏实,有较强的学习能力,熟悉常用爬虫工具;
3、熟悉linux开发环境,熟悉python等,熟悉其他开发语言优先;
4、理解http,熟悉html, DOM, xpath,css,js,ajax;
5、有Python分布式抓取系统的开发、架构经验,至少熟悉并使用过一种主流爬虫架构,如Scrapy、Gocolly、Webmagic等;
6、熟悉第三方RPA软件(弘玑、影刀、UiBot等)优先;
7、熟悉RAG流程优先,熟悉AI模型、RAG框架等优先;
8、熟悉反爬策略的应对,能够解决封账号、封IP、验证码、JS加密等问题;
9、熟悉Mysql、Redis、MongoDB等数据库,有过数据库调优和海量数据存储经验者优先。

工作地点

宁波鄞州区利时金融大厦1号楼23楼

职位发布者

吕女士/人力资源部经理

三日内活跃
立即沟通
公司Logo宁波渠成集团有限公司公司标签
但凡过往皆为序曲宁波渠成集团有限公司始创于2005年,是一家集研发,营销,创意设计及供应链管理相结合的综合型企业,并拥有多家国内及海外子公司,业务范围覆盖全球100多个国家和地区。针对海外市场,集团不仅为客户提供音视频支架台架及其配件,人体工学、音箱类等数千款产品,也为客户提供与产品配套的营销服务。集团拥有国内自主品牌北弧Brateck、松能Humanmotion,引领健康办公生活新趋势;而HumaneX(松能X)电竞品牌又在细分赛道做了人群深耕。三个品牌在国内主流电商平台均设有品牌官方旗舰店作为公司成长和发展的载体,集团已建立起一支有着优秀企业文化和精深专业技能的团队,结合公司的高效运营体系和独特商业模式,现已成为所在领域的标杆。年度营收近30亿并持续增长。不拘一格宁缺毋滥以奋斗者为本发现人才,培养人才,锻炼人才和成就人才是渠成基业长青的根基,渠成集团自成立以来一直在稳步发展,队伍也在不断壮大中,现有员工近1000人,平均年龄约29岁,毕业院校包括:浙江大学、中山大学、西安交通大学、上海交通大学、杭州电子科技大学、宁波诺丁汉大学、浙江工业大学、宁波大学、澳洲国立大学、西班牙巴塞罗那自治大学、中国美术学院等。虽然员工来自不同院校,有着不同背景,但是公司秉承着不拘一格,宁缺毋滥和以奋斗者为本的用人理念,对每一个入职员工均一视同仁,这里没有论资排辈,有的是海阔天高任飞翔的从容和舒展,以及不断成长、不断超越的自信和自豪。厚积薄发舍我其谁新时代新未来,渠成集团将在现有基础上继续扎实打造精准产品开发和深度贸易服务体系,并逐步向科技型外贸出口公司转型,同时把过去17年沉淀积累的文化、团队、体系、模式应用到其他系列产品和服务,从而形成强大的护城河。这不是一件简单的事,也不是一朝一夕可以达成的,选择做这件正确而艰难的事是因为我们相信有优秀的文化和团队,有厚积薄发的底气和舍我其谁的豪气,征途就会是坦途。待若干年后回首,我们一定已在新的高峰上俯视。LEGEND让LUMI为你讲述!员工成长体系: 1、一对一的新人指导,新人成长的每一阶段由辅导人、部门负责人、HR同时跟进; 2、线上学习平台,拥有海量学习资料;各类内外训,从岗位技能到跨部门知识分享; 3、同事之间互帮互助,资源共享; 4、开放的工作环境,公司高层可为你亲身辅导、答疑解惑。职业晋升:常规入职从P序列(技能方向)开始发展,随着技能的加深,后期分两个方向发展: P序列(技能方向):P1、P2、P3、P4、P5、P6、P7; M序列(管理方向):M1、M2、M3、M4、M5;渠成的每一个职位,都有其足够的发展空间。我们的邀请是长期的,是基于公司长远的发展规划以及对优秀人才的渴求……福利待遇: 1、周末双休,五险一金 2、国家法定带薪休假 3、国家法定节假日及礼金或礼品 4、多样的内外培训机会,一对一带教培养 5、福利体检、生日贺礼、新婚贺礼、生育贺礼等 6、结婚纪念日、重阳节、儿童节礼品等 7、高于行业平均薪酬的薪资 8、视业绩增长情况而发放的特别奖励 9、每年调薪及获得年度特别奖金的机会 10、工会活动、年度集体旅游 11、部门活动经费以及旅游经费 12、多姿多彩的主题活动,丰富多彩的有奖竞技活动申请渠道:中文官网网申;招聘网站直接投递简历;对于有意向的候选人,我司将在三个工作日内电话与您联系。
公司主页