爬虫工程师

岗位职责：
1.负责开发分布式网络爬虫系统，进行多平台信息的抓取和分析
2.负责爬虫设计评估、代码审查以及难点攻关
3.设计爬虫策略和防屏蔽规则，解决封账号、封IP、验证码等难点攻克，解决网站的反爬问题
4.研究各种网页、微信、app接口，实现多通道抓取

任职要求：
1.计算机相关专业，本科及以上学历。 2.具有一年及以上爬虫经验。
3.掌握时下流行的一门数据爬虫语言如：Java、Python等，熟悉JavaScript等dom操作，有高并发及分布式软件设计经验
4.熟悉各网站或者APP的一般安全防御策略