深圳招聘

职位描述：
你需要做的：
1.能独立负责设计和开发分布式网络爬虫系统，进行多平台信息的抓取和分析工作；
2.负责网页信息排重，提升平台的抓取效率；
3.负责爬虫核心算法和策略优化，熟悉采集系统的调度策略；
4.实时监控爬虫的进度和警报反馈。

我们期待你：
1.熟悉Linux系统，熟练掌握Python语言，掌握Java和C++语言；
2.了解多线程、多进程、网络通信编程相关知识，有分布式爬虫架构经验；
3.掌握网页抓取原理及技术，了解基于Cookie的登录原理，熟悉基于正则表达式、XPath、CSS等网页信息抽取技术；
4.有通过动态替换代理IP，攻克防爬技术的经验者优先；
5.熟悉验签破解技术，了解APP用户授权访问机制，掌握Selenium，APP破解技术优先；
6.做过数据处理、ETL等相关工作优先。 举报 分享

于海量的数据分析，利用60多个维度算法实现推荐匹配，筛选出企业适合的人选，取代HR大部分的人才search与沟通工作。根据HR行为，打造可视化的人员素质模型。推荐系统取代前期人工电话沟通，通过邮件、微信、app、手机官网等渠道快速联络候选人。