贵阳 [切换城市] 贵阳招聘贵阳计算机软件招聘贵阳数据库工程师/管理员招聘

大数据采集工程师

贵州职圈科技有限公司

  • 公司规模:少于50人
  • 公司性质:民营公司
  • 公司行业:计算机软件

职位信息

  • 发布日期:2016-09-21
  • 工作地点:贵阳
  • 招聘人数:若干人
  • 学历要求:专业培训
  • 职位月薪:5000-10000/月
  • 职位类别:数据库工程师/管理员  

职位描述

职位描述:
工作职责:
职责一:
1:根据产品需求编写爬虫程序,进行互联网相关数据的抓取和解析。
2:工作时间百分比:80%
职责二:
1:维护优化现有爬虫程序,参与公司爬虫系统研发维护工作
2:负责采集系统架构设计、下载策略、调度算法的设计和开发,实现大规模互联网数据的抓取。
3:分析已有采集系统的技术缺陷,对策略架构做出合理地调整和改进。
4:设计策略和算法,提升网页抓取的效率和质量,解决信息精准抽取等核心技术难题。
5:工作时间百分比:20%
工作要求:
1:大专及以上学历,计算机、信息技术或相关专业,两年以上工作经验
2:掌握C++/Java/Python任意编程语言,熟悉常用的信息抓取策略
3:熟悉Linux/Unix下系统环境,有系统开发经验更佳
4:熟悉网络通信原理、了解TCP/IP 、HTTP、JSON、RESTful、oauth等
5:熟悉WEB数据交互原理,有一定的HTML CSS JS基础
6:有网页爬虫开发经验,掌握网络爬虫开发原理,能够总结分析不同网站的结构特点与规律
7:对算法设计和数据结构有深刻的理解,精通网络编程
8:熟悉MongoDB、Redis、HBase等NoSQL服务
工作时间:9:00---18:00 周末双休

职能类别: 数据库工程师/管理员

举报 分享

公司介绍

职圈是定位于移动互联网端的职业社交、求职招聘平台,致力于打造从实习和首份工作到后续职业发展的全职业生涯社交圈。职圈利用大数据技术改造在线招聘,对企业和职位进行多维度深度数据刻画,精准匹配求职者和目标职位,为大数据在就业招聘领域的发展开启了全新的商业模式。
职圈还提供丰富多样的基于地理位置信息的互动平台,围绕大学生初入职场提供多种服务,帮助大学生树立职业目标,融入职业生涯,实现职业理想。
职圈通过线上线下的多种渠道相结合,为企业客户提供有效的岗位招聘服务。

联系方式

  • 公司地址:上班地址:贵州省贵阳市花溪区大学城