该职位已失效,看看其他机会吧

python爬虫工程师

1-1.3万
  • 杭州西湖区
  • 1-3年
  • 本科
  • 全职
  • 招1人

职位描述

PythonMySQLOracle爬虫爬虫开发云计算/大数据
职位描述
1、遵循Robots协议,采集互联网公开的信息,满足各类业务数据需求
2、参与团队分布式爬虫采集系统的建设,优化数据调度、抓取、解析、存储全栈流程
3、帮助团队攻克各种爬虫技术难关,提升海量数据系统的抓取效果与性能
4、推动技术创新,推动相关技术在搜索场景中的业务落地并取得实际收益
任职要求:
1、计算机软件或相关专业本科以上学历,接受应届生
2、熟悉网络协议(如HTTP、HTTPS)、Web抓取技术,浏览器渲染原理等
3、有实际的爬虫开发经验,熟悉Scrapy、BeautifulSoup、Selenium等爬虫框架和工具
4、熟悉常见反爬封禁策略,并具备相关的实战经验;
5、熟悉Python/Java/Go/C++其中一种语言,具备扎实的编码能力;了解MapReduce,有大数据处理经验更佳
6、思路清晰,优秀的分析问题和解决问题的能力,对解决具有挑战性问题充满激情,良好的团队合作精神具有强烈的责任心
查看全部

工作地点

杭州西湖区阿里巴巴云谷园区

职位发布者

董先生/人事经理

昨日活跃
立即沟通
公司Logo南京蓝魔云信息技术有限公司
南京蓝魔云企业管理有限公司成立于2019年,我们是一家专注于互联网行业的解决方案提供商。为企业创造价值、为伙伴提供支撑、为行业带来改变。我们希望:-把软件做透、做全。首先把业务能力做起来,找到正确的做大软件的方法,具备快速扩产品线的能力。-通过软件实现企业间的互联互通。最终成为一家通过软件驱动全产业链运转的平台型公司。
公司主页