上海招聘

1.负责各大来源的内容爬取工作；

2.负责开发网络爬虫系统，完成数据采集与爬取、解析处理、入库等数据日常工作；

3.负责领域知识的定向爬取、深度提取和挖掘；配合数据的清洗、整理、去重及合并等工作；

4.负责技术开发团队的需求收集并包装出相应的爬虫API输出；

5.针对不同网站的反爬虫技术提出有效的应对策略；

岗位要求：

1.计算机相关专业毕业，3年以上实际开发经验；

2.精通爬虫相关语言java、python、nodejs 等；

3.熟悉hadoop、spark、Redis,、MongoDB等技术优先；有分布式爬虫架构，数据挖掘经验者优先；

4.有互联网从业经验优先

彼邑 BEATS
让数据驱动社会进步，带来新的产业革命。

我们在提供大数据应用/洞察报告服务的同时，在各个领域，如技术开发/移动端3D运用，品牌/创意/数字营销，效果媒体/精准营销，都能根据客户不同需求提供专业的解决方案。