杭州招聘

职位描述：
职责：
1． 负责数大数据处理模块和数据挖掘平台的架构设计和开发；基于spark技术的海量数据的处理、分析、统计和挖掘工作；
2． 基于spark框架的数据挖掘平台的设计、开发和维护；负责Spark平台的设计、开发、部署、管理维护和优化；
3． 负责基于spark平台的大数据挖掘、用户画像、关联分析等应用项目的开发。

技能：
1． 掌握spark及其组件系统架构设计开发，擅长基于spark/spark streaming/impala环境大数据分析处理，至少一年以上的spark开发经验；
2． 熟悉常用开源分布式系统；
3． 熟悉数据仓库原理，熟悉sql语言；优良的trouble shooting能力；
4． 深入研究过spark源码、能对内核进行开发优化的优先；
5． 有机器学习、用户画像经验的优先； 举报 分享

杭州数擎科技有限公司是以数据分析为核心的高新技术企业，是在互联网领域，集信息资源产品、信息增值服务和信息处理方案为一体的综合信息服务商。
公司以客户为导向，依托强大的数据采集能力，应用先进的信息处理技术和检索技术，为科技界、企业界和政府部门提供高质量的信息资源产品。在丰富信息资源的基础上，数擎还运用先进的分析和咨询方法，为用户提供信息增值服务，以满足用户对深度层次信息和分析的需求，为用户确定技术创新和投资方向提供决策。
在为用户提供信息内容服务的同时，作为国内第一批开展互联网服务的企业之一，数擎坚持以信息资源建设为核心，努力发展成为中国第一的信息服务提供商，开发独具特色的信息处理方案和信息增值产品，为用户提供从数据、信息到知识的全面解决方案，服务于国民经济信息化建设，推动中国全民信息素质的成长。