北京招聘

岗位职责：

1.分布式爬虫系统和数据采集的设计、开发。

2.爬虫策略和防屏蔽规则，提升网页抓取的效率和质量。

3.国内/海外各类互联网数据的采集抓取。

4.理解系统数据处理流程以及业务功能需求。

5.负责核心算法的设计与开发

岗位要求：

1.统招本科、计算机相关专业毕业，3年+以上实际的爬虫项目经验;

2.掌握JAVA，掌握Python、Shell等脚本语言;

3.掌握PC网页抓取原理及技术，包括基于Cookie的登录管理，基于headless的采集，熟悉正则表达式、XPath、Jsoup等网页信息抽取技术;

4.对APP采集有丰富经验，包括抓包工具，中间人代理二次开发以及APP模拟器等;

5.有APP反编译识别，修改内核浏览器经验者，优先考虑;

6.能够解决封账号、封IP采集等问题,解决网页抓取、信息抽取等问题,构建完善的网络信息收集平台，优先;

7.深入了解 HTTP(S), TCP/IP 等协议和web登录认证机制;

8.负责网络爬虫采集规则的编写;

9.有分布式爬虫架构经验者优先;

8.有数据分析、数据挖掘相关经验者优先。

七彩阳光旅行社创立于2014年，经营范围包括：入境旅游业务；国内旅游业务；旅游信息咨询；技术开发、技术服务、技术转让。公司主要业务涵盖了几乎全部的票务体系，汽车票，飞机票，船票，景点门票等的在线查询，预定和送达。
  七彩阳光自成立以来，崇尚创新、激情、梦想，以公司为家，快乐工作，快乐生活。七彩阳光利用大数据分析技术和互联网数据挖掘技术，拓展创新商业模式，努力打造成具有影响力的电子商务商旅B2B平台。坚持以客户为本、以信用为先的服务准则，用心解决客户最迫切、最实际的需求，以优质的产品、先进的技术为用户提供完美的服务。
七彩阳光旗下品牌：空铁无忧（51kongtie.com）
诚邀众多有志之士携手合作，竭诚为广大客户带来方便，快捷，高效的服务！