北京 [切换城市] 北京招聘北京计算机软件招聘北京软件工程师招聘

爬虫开发工程师

上海深擎信息科技有限公司

  • 公司规模:50-150人
  • 公司性质:民营公司
  • 公司行业:计算机软件

职位信息

  • 发布日期:2019-09-21
  • 工作地点:上海-浦东新区
  • 招聘人数:1人
  • 工作经验:1年经验
  • 学历要求:本科
  • 职位月薪:0.8-2万/月
  • 职位类别:软件工程师

职位描述

1、负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析工作; 

2、负责网页信息和APP数据抽取、清洗、消重等工作,提升平台的抓取效率;

3、参与爬虫核心算法和策略优化,熟悉采集系统的调度策略;

4、实时监控爬虫的进度和警报反馈

任职要求:

  1. 熟悉爬虫原理,熟悉常见的反爬技术,有一年以上爬虫项目开发经验;
  2. 熟悉任意一种主流爬虫技术架构,Python,Go,Java等;

3、掌握http协议,熟悉html、dom、xpath等常见的数据抽取技术;

4、熟悉Kafka、MongoDB,ElasticSearch、Redis等大数据组件的使用;

5、有大规模数据处理、数据挖掘、信息提取等经验者优先。

职能类别:软件工程师

公司介绍

深擎科技是一家深耕行业+AI的科技创业公司。公司成立于2018年1月,在自然语言处理、知识图谱、机器学习等领域具备卓越的研发能力。现已在金融、法律等领域,与重量级客户合作,形成颇具行业影响力的产品。从智能人机交互,到智能投资,到智能法援,为企业提供智能时代的AI产品与云服务,实现AI赋能企业。

深擎拥有一流的AI研发团队,团队主体源自于IBM中国人工智能实验室,在人工智能领域研究能力突出,精通人工智能相关领域自然语言处理、机器学习等模型与算法。团队具有多年金融行业人工智能服务经验,能够将企业客户的痛点与最新的人工智能技术结合,提升企业的智能化水平。团队成员主要来自于上海交大、复旦大学、南京大学、国防科大等985工程大学,并拥有多项与人工智能技术和自然语言处理相关的专利。公司还与清华、复旦、国防科大等国内顶尖的人工智能院校形成战略合作,将最前沿的AI技术应用到金融、法律等行业领域。此外,深擎已与多家数据巨头公司战略合作,基于行业大数据,为企业客户提供差异化的产品与服务。

目前深擎已获得千万级天使轮融资,下半年即将完成pre-A轮融资,在资本市场炙手可热,是2018年行业+AI领域一颗冉冉升起的明星。

使命: 无企业,不智能 Empower intelligence with enterprise
愿景:在人工智能领域,成为中国顶尖的企业级技术提供商

联系方式

  • 公司地址:地址:span张江高科技园区