北京招聘

职责描述：

1、负责网络爬虫程序设计，开发及维护，对目标网站进行数据爬取分析，找到最优化的爬取策略。

2、负责爬虫系统的架构设计和研发，独立进行抓取和清洗工作；

3、负责技术难点的攻克；

4、负责大规模数据爬虫的性能优化工作；

任职要求：

1、计算机相关专业本科及以上学历，1年以上爬虫工作经验者优先；

2、精通网页抓取原理及技术，精通正则表达式，熟练从结构化和非结构化的数据中获取信息；

3、精通PYTHON语言，熟悉数据库性能优化与常见缓存技术与策略；

4、精通一种开源爬虫框架，如scrapy、webmagic、nutch、heritrix等等，有开发爬虫框架经验优先；熟悉反爬虫、验证码识别技术者优先；

5、熟悉fiddler，charles等抓包工具；

7、具备优秀的逻辑思维能力，对解决挑战性问题充满热情，善于分析问题/解决问题；

8、有强烈的上进心和求知欲，擅于学习新事物。

微信分享