1、主导和参与爬虫系统的架构设计、开发与优化；
2、研究优化爬虫算法，提升爬虫系统的稳定性、可扩展性；
3、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量；
4、能独立解决实际开发过程中碰到的各类问题；
5、负责大数据产品所需的信息抓取、解析、清洗等研发与优化工作。
岗位要求：
爬虫开发工程师
学历要求：
本科
适合专业：
计算机科学与技术
专业技能要求：
Java
Python
一般
良好
熟练
精通
其他技能要求：
1、能理解业务逻辑，有责任心，学习能力强；
2、工作积极主动，思路清晰，擅长沟通。
2、工作积极主动，思路清晰，擅长沟通。
职位工作内容：
1-3年
3-5年
职位描述
已选城市
已选行业
那么该如何规划自己的职业呢？首先要结合自己的兴趣爱好和技能优势，寻找相匹配的工作岗位。可以多尝试几个岗位锻炼，然后再慢慢寻找适合自己职业发展的行业和岗位，从而沉淀下来慢慢积累经验。
如果是重要的岗位，候选人在入职之前，企业一般都会做背景调查，如果出现污点，业内封杀，记录在案，那么整个职业生涯就毁了。
