大数据架构设计人员
上海义为信息科技有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:学术/科研
职位信息
- 发布日期:2017-10-25
- 工作地点:上海-虹口区
- 招聘人数:2人
- 学历要求:本科
- 职位月薪:0.8-1万/月
- 职位类别:数据库工程师/管理员 系统架构设计师
职位描述
1.研究与跟踪大数据技术发展方向,参与制定公司核心技术发展规划和核心模型的演进路线,并参与公司技术积累性质的研发工作;
2.负责综合运用Spark、Kafka、HDFS、NoSQL等大数据技术设计企业级大数据平台技术方案,包括:ODS以及数据仓库逻辑模型、物理模型的分析与设计,数据操作性能优化设计等;
3.负责数据分布式计算环境的设计与优化,根据公司的项目需求,满足上层数据应用的各种数据检索、实时计算、批量操作需求;
4.参与行业解决方案的需求分析、系统分析、设计以及实施管理工作;
【任职要求】
1.本科及以上学历,有大数据架构设计相关工作经验者优先;
2.对大数据技术有充分的热情,熟悉数据仓库和BI的理论知识,熟悉企业数据管理体系和方法,对企业的数据需求有深刻的理解;
3.阅读过HADOOP、HIVE、HBASE、Spark、STORM之一的核心源码,对MapReduce模型等大数据技术原理有深刻理解;
4.熟练运用Python、Scala、Java之中一种语言,并有实际代码案例;
5.熟悉主流关系数据库技术(如Oracle、MS SQL、DB2、MySQL等),对四大类型的NoSQL数据库的特性熟悉;
6.具有大数据存储、加工、分析性能调优的知识和经验,能解决技术难题;
7.具有良好的沟通能力、逻辑思维能力、书面表达能力、学习能力、动手能力,性格积极乐观、诚信、自律、抗压。
本职位同样欢迎各优秀应届毕业生应聘!
职能类别: 数据库工程师/管理员 系统架构设计师
关键字: 大数据 大数据架构 分布式编程 Spark
公司介绍
上海义为信息科技有限公司(以下简称“义为”),专注于大数据领域的数据分析技术及底层架构搭建,通过实际的探索和创新,公司能为市场提供前沿的各类领先的数据类服务。同时,通过对数据质量的比对和优化,可以对市场上大类别的数据进行整理和价值评估、以及代为申请权威数据价值认证,为企业开拓和发掘“第四利润源”,真正保护好、用好未被开发和利用的数据资源。
数据技术方面,义为是目前国内极少数专注于Spark并掌握企业级大数据Spark核心技术的高科技公司,通过自主建设大数据业务中心,向客户提供全面的大数据实时计算及安全服务。
数据分析方面,可为客户提供从底层硬件设备,到数据处理,直到商业分析层的垂直领域服务,拥有多项政府及科研机构的成功实施案例;
除上述主营外,具备为特定服务对象提供区块链设计及实施的业务能力,和多项专属的数据多维增值服务。
主营业务包括:
1,大数据分析&架构搭建
包含1-1通用行业的PB级大数据架构一体化搭建
1-2 轻量化标准设备提供
1-3 商业级大数据分析操作系统
1-4 数据挖掘&商业分析
案例
2,数据资产认证&金融服务
包含2-1数据资产整理&挖掘
2-2数据资产确立&评估
2-3申请权威机构认证
2-4颁发资产认定证明
2-5增值服务,如数据交易,数据资产抵押贷款等
案例
3,区块链
包含3-1 区块链建设环境评估与定型设计
3-2 解决方案及成本核算
3-3 上链等一体化实施服务
案例
4,其他业务板块
4-1大数据风险控制模型
与以色列同业合作,研发“企业信用”为核心的先进风险评价系统,领先目前国内银行等风控模式,尚处测试最后阶段。
4-2 数据安全服务
将价值数据从公有云迁移到私有云,对现有的数据进行密级存储,加密传输,以及本地安全防护等。
4-3 算力改造
“矿场改造”----比特币等电子货币矿场算力,改造为“科学计算或超算”兼容型算力场,成熟技术较为稀少;
案例
公司资质:
公司自2016年起,获批成为国家高新技术企业。
拥有6项科技类TM商标;已有 16 项知识产权,包括 14 项计算机软件著作权、 1 项实用新型专利和 1项发明专利。
可满足各类政府智库及科研院所、顶尖信息数据企业、及港口物流企业对大数据建设、处理及分析的综合需求。