深圳 [切换城市] 深圳招聘

数据采集工程师

深圳市前海美联科技有限公司

  • 公司规模:1000-5000人
  • 公司性质:民营公司
  • 公司行业:互联网/电子商务

职位信息

  • 发布日期:2019-04-17
  • 工作地点:深圳-龙岗区
  • 招聘人数:1人
  • 工作经验:无工作经验
  • 学历要求:招1人
  • 语言要求:不限
  • 职位月薪:1.5-2万/月
  • 职位类别:大数据开发/分析

职位描述

岗位职责:

1、负责多平台信息爬取和页面内容的提取分析。构建垂直类爬虫架构,智能抓取系统设计与研发(如抓取调度,多样化抓取,页面解析和结构化抽取,海量数据存储和读取等);

2、负责为各个业务线提供垂直、精准的数据采集,抽取,存储服务;

3、负责爬虫核心算法的策略优化研究,提升爬虫抓取效率和质量(如调权调度、分析预测、质量判断、封禁与反封禁研究等);

4、负责HTTP、AJAX等各类网络请求分析,探索和研究高效的数据抓取解决方案;

5、负责特殊网页采集任务的分析及采集方案设计;

6、负责爬取数据的清洗和入库工作,便于数据的后续分析与使用;

7、负责爬取数据的分析和分析结果应用等工作;

8、负责爬虫系统的编写开发、升级和维护。

岗位要求:

1、本科及以上学历,优秀的代码能力,扎实的数据结构和算法功底,有快速迭代、逐步优化的工程项目经验;

2、熟悉爬虫框架,有5年以上爬虫开发经验优先;

3、熟悉电商平台规则和算法,有电商平台数据采集经验者优先;

4、有良好逻辑思维能力、沟通能力、团队合作精神、学习能力,抗压能力;

5、熟悉正则表达式、Jsoup、XPATH、CSS选择器,能够从结构化和非机构化的数据中获取信息,了解各种Web前端技术,包括HTML/XML/JavaScript/AJAX/JSON等;

6、有FACEBOOK、TWITTER、LINKEDIN等社交媒体网站数据抓取经验;

7、有多线程、网络数据处理经验优先(如HTTP协议,AJAX,爬虫开发,浏览器内核开发,Web服务开发等);

8、有大规模分布式海量数据处理经验优先(如Hadoop/Hbase/Spark/Strom/Flink等);

9、熟悉MySQL/MongoDB/Hadoop/Hive/HBase等平台者优先。

职能类别: 大数据开发/分析

公司介绍

公司简介:
【总部工作地点在龙岗平湖华南城二号交易广场,请应聘者了解一下~~】
立刻说丨让世界听你说
立刻说(原美联在线)隶属于美联国际教育集团,是国内领先的在线学习品牌。凭借着10年专业的语言培训经验,同时借助互联网优势,打破了时间与空间对学习的限制,为广大英语学习者与爱好者,提供了24小时/365天不间断的真人在线英语培训产品与服务。
立刻说涵盖了通用英语、青少英语、海外考试英语、行业英语4大产品体系,是全产线的在线教育专业品牌。借助互联网整合全球优质师资, 现已拥有2000多位欧美高颜值专业外教,通过智能化的真人互动学习平台,学员使用电脑/平板/手机就能随时随地浸入全英语环境,有效帮助学员提升学习效率和兴趣。
 
立刻说丨美联国际教育集团成员
美联国际教育集团(纳斯达克上市公司),前身为美联英语,创立于2006年,分别于纽约、北京、深圳设立总部和研发基地。旗下产线品牌包括:美联英语、美联出国考试、美联留学、美联国际高中、立刻说(原美联在线),囊括线上教育与线下教育,成为全球跨境教育领先品牌。
如今,美联拥有100多家教学中心,覆盖14个省份、25个城市,全球团队达3000余人,其中教学、研发团队过千人,立志于整合全球教学资源,帮助中国精英人群与家庭通过轻松的学习,真正地运用英语。美联致力于让每个美好梦想都能实现,使更多中国面孔成为世界的中坚力量。
 
立刻说丨品牌使命
立刻说始终立足于教育的本质,以“唤醒梦想、探索未知”为品牌使命,整合全球教育资源并通过互联网在中国落地,不仅为学员提供自由便利的全球化语言培训,还为他们的生活和社交提供服务与帮助,让学员通过语言学习,拥有能够胜任任何一种工作的能力,以及适应任何一种生活状态的心理品质;我们希望让那些对英语学习有兴趣,并想学以致用的人,能够受到专业的、可持续终身的语言能力教育,并为他们创造随时随地想学就能学的语言环境,让他们能够灵活自如的运用英语这门工具去打破知识边界,从而更加自信的去探寻更美好的自我与世界,这也是“立刻说”始终在践行的品牌理念:用语言,唤醒梦想,探索未知,让世界听你说。


培训情况:除新员工及部门内专业性培训外,公司还定期开展管理人员培训,包括《雏鹰计划》、《狮子计划》、《管理沙龙》、《红杉树计划》、《领导力训练营》、《黄埔军校》等。
发展情况:双通道——专业路径+管理路径
专业通道:初级---中级---高级---技术骨干---专家(相当于经理、总监待遇)
管理通道:职员---主管---经理---高级经理---总监

联系方式

  • Email:tmy@meten.com
  • 公司地址:地址:span峨山路77号加禾LOFT609室