大数据开发工程师
北京中测安华科技有限公司
- 公司规模:150-500人
- 公司性质:国企
- 公司行业:计算机软件
职位信息
- 发布日期:2019-11-27
- 工作地点:北京-海淀区
- 招聘人数:2人
- 工作经验:2年经验
- 学历要求:本科
- 职位月薪:1-1.5万/月
- 职位类别:大数据开发/分析 软件工程师
职位描述
1、负责大数据平台搭建及数据仓库建模
2、利用分布式计算集群实现对数据的分析、挖掘、处理
岗位需求:
- 熟练掌握一门语言Scala/Python/Java,能够编写Mapreduce、Spark等应用程序,以及相关的性能优化方式;
- 精通一种或多种分布式平台,理解计算框架,如Hadoop,Mapreduce、Spark streaming、storm、HBase,Zookeeper、Hive、Sqoop、ELK、Kafka;熟练掌握相关组件的使用、原理实现、常用的性能优化方案;
- 熟悉常用的数据结构和算法,有在业务或分布式系统中解决负载均衡,数据一致性保证的经验;
- 熟悉Linux平台,熟练使用常用命令,熟悉 shell/python 等脚本语言的一种或多种;
- 熟练运用sql语言,至少使用过mysql、oracle、等主流数据库中的一种;
- 有自主搭建大数据平台能力(CDH,HDP等);
- 有快速和持续学习的能力,动手能力强,有进取心、责任心强;
- 有互联网大数据架构,大规模集群优化经验,优先考虑;
- 有过hadoop生态圈的二次整合开发能力加分,有过大型数据仓库开发相关经验加分。
公司介绍
北京中测安华科技有限公司是中国信息安全测评中心全资公司及人才蓄水池。自成立以来,中测安华始终以国家使命工程为己任,致力于用系统工程方法让网络世界更安全。中测安华“面向系统、聚焦安全、基于工程”,倡导构建以大数据技术为核心的“持续风险监测”体系,提供涵盖威胁监测分析、数据安全保护、漏洞风险管控等的全生命周期整体解决方案,为政府、能源、金融等高安全需求的用户提供企业级至防务级的安全产品及服务。中测安华注重技术自主创新,作为大数据协同安全技术国家工程实验室副理事长单位,积极推进大数据安全领域的技术研究与产业协作;成立了企业研究型机构——必达实验室(PetaLab), 致力于持续风险监测领域的前沿技术研究。经数年耕耘,中测安华拥有六十余项国家专利与软件著作权,多次获得国家、部委级科技进步奖项。中测安华多次出色完成PB级国家大型系统工程,并承担中共十九大、两会、世界互联网大会等多项重大活动的网络安全保障任务。经过多年砺炼,中测安华打造了一支作风过硬、技术突出的红色工程师队伍,为国家关键基础设施及行业用户提供“安全、自主、可控、可信”的保障体系。
联系方式
- 公司地址:地址:span东北旺西路8号院37号楼