大数据采集工程师
贵州职圈科技有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2016-09-21
- 工作地点:贵阳
- 招聘人数:若干人
- 学历要求:专业培训
- 职位月薪:5000-10000/月
- 职位类别:数据库工程师/管理员
职位描述
职位描述:
工作职责:
职责一:
1:根据产品需求编写爬虫程序,进行互联网相关数据的抓取和解析。
2:工作时间百分比:80%
职责二:
1:维护优化现有爬虫程序,参与公司爬虫系统研发维护工作
2:负责采集系统架构设计、下载策略、调度算法的设计和开发,实现大规模互联网数据的抓取。
3:分析已有采集系统的技术缺陷,对策略架构做出合理地调整和改进。
4:设计策略和算法,提升网页抓取的效率和质量,解决信息精准抽取等核心技术难题。
5:工作时间百分比:20%
工作要求:
1:大专及以上学历,计算机、信息技术或相关专业,两年以上工作经验
2:掌握C++/Java/Python任意编程语言,熟悉常用的信息抓取策略
3:熟悉Linux/Unix下系统环境,有系统开发经验更佳
4:熟悉网络通信原理、了解TCP/IP 、HTTP、JSON、RESTful、oauth等
5:熟悉WEB数据交互原理,有一定的HTML CSS JS基础
6:有网页爬虫开发经验,掌握网络爬虫开发原理,能够总结分析不同网站的结构特点与规律
7:对算法设计和数据结构有深刻的理解,精通网络编程
8:熟悉MongoDB、Redis、HBase等NoSQL服务
工作时间:9:00---18:00 周末双休
举报
分享
工作职责:
职责一:
1:根据产品需求编写爬虫程序,进行互联网相关数据的抓取和解析。
2:工作时间百分比:80%
职责二:
1:维护优化现有爬虫程序,参与公司爬虫系统研发维护工作
2:负责采集系统架构设计、下载策略、调度算法的设计和开发,实现大规模互联网数据的抓取。
3:分析已有采集系统的技术缺陷,对策略架构做出合理地调整和改进。
4:设计策略和算法,提升网页抓取的效率和质量,解决信息精准抽取等核心技术难题。
5:工作时间百分比:20%
工作要求:
1:大专及以上学历,计算机、信息技术或相关专业,两年以上工作经验
2:掌握C++/Java/Python任意编程语言,熟悉常用的信息抓取策略
3:熟悉Linux/Unix下系统环境,有系统开发经验更佳
4:熟悉网络通信原理、了解TCP/IP 、HTTP、JSON、RESTful、oauth等
5:熟悉WEB数据交互原理,有一定的HTML CSS JS基础
6:有网页爬虫开发经验,掌握网络爬虫开发原理,能够总结分析不同网站的结构特点与规律
7:对算法设计和数据结构有深刻的理解,精通网络编程
8:熟悉MongoDB、Redis、HBase等NoSQL服务
工作时间:9:00---18:00 周末双休
职能类别: 数据库工程师/管理员
公司介绍
职圈是定位于移动互联网端的职业社交、求职招聘平台,致力于打造从实习和首份工作到后续职业发展的全职业生涯社交圈。职圈利用大数据技术改造在线招聘,对企业和职位进行多维度深度数据刻画,精准匹配求职者和目标职位,为大数据在就业招聘领域的发展开启了全新的商业模式。
职圈还提供丰富多样的基于地理位置信息的互动平台,围绕大学生初入职场提供多种服务,帮助大学生树立职业目标,融入职业生涯,实现职业理想。
职圈通过线上线下的多种渠道相结合,为企业客户提供有效的岗位招聘服务。
职圈还提供丰富多样的基于地理位置信息的互动平台,围绕大学生初入职场提供多种服务,帮助大学生树立职业目标,融入职业生涯,实现职业理想。
职圈通过线上线下的多种渠道相结合,为企业客户提供有效的岗位招聘服务。
联系方式
- 公司地址:上班地址:贵州省贵阳市花溪区大学城