北京招聘

【职位描述】：

1、负责分布式爬虫系统的架构设计和开发；

2、负责多平台的信息抓取，数据的清洗、落地、解析、分析等研发与优化工作；

3、抓取策略算法的更新维护，设计爬虫策略及反爬规则，提升抓取效率和稳定性

【任职要求】：

1、本科及以上学历；

2、精通网页抓取原理及技术，精通正则表达式，熟练从结构化和非结构化的数据中获取信息；

3、熟悉Linux开发环境，至少熟悉Python/Go/Java/Node.js中的一种编程语言，熟悉多线程、多进程、网络通信编程相关知识；

4、理解HTTP协议，熟悉HTML、DOM、XPath、JavaScript等前端技术；

5、熟悉反爬虫、验证码识别技术者优先；

6、有自然语言处理、机器学习经验优先；

7、熟悉浏览器内核、渲染机制优先；

8、具备优先的逻辑思维能力，对解决挑战性问题充满热情，善于分析问题、解决问题；

9、有强烈的上进心和求知欲，善于学习新事物。

微信分享