深圳招聘

岗位职责：

一、负责公司内部平台功能的实现和业务开发。

二、负责相应系统、模块的开发工作，包括需求分析、接口设计、数据设计、测试、性能优化等

三、负责多个垂直频道的数据抓取工作、研究各种网站、网页、链接的形态，发现它们的特点和规律；

四、网络爬虫工具的设计、开发及优化；

岗位要求：

一、2年以上开发经验，能熟练使用Python语言进行日常开发工作。

二、熟悉互联爬虫原理，能熟练使用Scrapy等开源爬虫框架的一种。

三、具有较强的沟通能力，分析和解决问题的能力，具备良好的团队合作精神和服务意识。

四、熟悉urllib2、urllib3、requests等多种库的使用。

五、熟悉常用设计模式，一定的算法与逻辑思维能力。

六、理解http，熟悉html, DOM, xpath, scrapy等，精通网页抓取原理及技术、正则表达式，能从结构化的和非结构化的数据中获取信息；

七、精通Python、Java、C++任一语言和数据结构，编码基本功扎实。

八、对反爬机制有较强的应对能力,熟练使用fiddler,wireshark,科来等抓包工具。

微信分享