岗位要求

• 爬虫开发工程师

• 学历要求: 本科

  适合专业: 计算机科学与技术

  上岗要求: 初级程序员

  专业技能要求:

  一般 良好 熟练 精通

  • Java
  • Python

  其他技能要求: 1、能理解业务逻辑，有责任心，学习能力强；
  2、工作积极主动，思路清晰，擅长沟通。

职位工作内容

• 1-3年
• 3-5年

• 职位描述

  1、主导和参与爬虫系统的架构设计、开发与优化；
  2、研究优化爬虫算法，提升爬虫系统的稳定性、可扩展性；
  3、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量；
  4、能独立解决实际开发过程中碰到的各类问题；
  5、负责大数据产品所需的信息抓取、解析、清洗等研发与优化工作。

• 职位描述

  1、负责数据采集、解析处理、入库等工作；
  2、负责网络爬虫架构设计、功能开发及更新优化等工作；
  3、负责爬虫核心算法和策略优化，熟悉采集系统的调度策略。