大数据开发工程师(隶属于某BAT下属公司)
北京仕邦达人力资源服务有限公司上海分公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:专业服务(咨询、人力资源、财会)
职位信息
- 发布日期:2019-01-07
- 工作地点:北京
- 招聘人数:1人
- 工作经验:无工作经验
- 学历要求:本科
- 职位月薪:1-3万/月
- 职位类别:其他
职位描述
岗位职责:
1.承担建设基于Hadoop/Hbase/Spark生态的大数据离线/实时处理平台;
2.负责公司大数据集群的构建、运维、开发工作,确保高可用;
3.负责集群容量规划、扩容及集群性能优化,参与大数据基础环境的架构设计与改进;
4.参与业务数据、生产日志的抽取、转储、检索等相关工作;
5.跟进大数据前沿技术的发展,将合适的技术方案适时引入业务场景。
6.负责数据仓库和大数据处理模块的架构设计和开发;
7.负责基于Spark技术的海量数据的处理、分析、统计、挖掘工作;
岗位要求:
1.统招本科、硕士或以上学历;2年-8年工作经验。
2.扎实的计算机基础,熟悉常用的数据结构和算法,熟悉Linux系统环境;
3.精通Java,熟悉springMVC,MyBatis架构;有jvm调优经验优先,熟悉Linux开发环境,了解shell、python等脚本语言开发;
4.熟悉大数据技术栈,对Hadoop、Hive、Spark、Hbase,ELK,CDH,ES等有实际项目开发经验;
5.了解相关数据处理技术Storm、Spark、Flink、Azkaban、Flume、Kafaka、Zookeeper等一种或几种;
6.熟悉使用Spark Streaming和Spark SQL进行数据处理、查询、统计等工作;
7.熟悉使用Spark Mllib进行数据分析等工作。
8.对MySQL、Redis、HBase等数据库有一定的使用经验;
9.熟悉数据仓库设计与实现,有过相关实践经验者优先
10.具备数据建模(机器学习,数据挖掘,信息检索背景)和分析理论知识和经验;
11.具备一定的算法能力,了解常用一些算法工具,包括但不限于:K-means聚类、LDA.神经网络、欧式距离、SVM.过/欠拟合、DL;
12. 在开源社群活跃并有积极贡献者优先。
岗位投递邮箱:
Yu.lu@fatalent.com
职能类别: 其他
公司介绍
北京外企德科人力资源服务上海有限公司(FESCO Adecco)是一家中外合资人力资源服务企业,由中国500强企业之一的北京外企人力资源服务有限公司(简称FESCO)与世界500强之一的人力资源服务集团Adecco(德科集团)合资成立。
外企德科为客户提供全方位的业务流程外包(BPO)、财务外包与薪酬管理、人事委托/人事派遣、全球化派遣、人才招聘/RPO相关服务、健康福利与弹性福利等人力资源解决方案。
合资后的FESCO Adecco整合了双方的客户资源,依托全球化的资源和服务平台,融合本土网络优势,业务范围扩大至全国。目前,FESCO Adecco 的全国服务人数超过60万名,服务客户近10,000家。
联系方式
- Email:emma.zhang@fatalent.com
- 公司地址:地址:span海淀科学院南路2号,融创资讯中心
- 电话:18800291561