数据仓库开发工程师 (职位编号:unidt000468)
华院数据技术(上海)有限公司
- 公司规模:150-500人
- 公司性质:合资
- 公司行业:互联网/电子商务 计算机服务(系统、数据服务、维修)
职位信息
- 发布日期:2016-12-22
- 工作地点:上海
- 招聘人数:1人
- 工作经验:5-7年经验
- 学历要求:本科
- 职位月薪:15000-19999/月
- 职位类别:互联网软件开发工程师
职位描述
岗位职责:
1 参与/负责数据仓库ETL(数据抽取、加载、清洗、转换)处理任务的设计和开发工作,支持日常数据批处理、近实时处理的要求,对新的开发需求和异常情况提供技术支持
2 参与/负责数据仓库ETL调度程序的设计和开发工作,支持对任务的监控和配置管理
3 参与/配合数据仓库部分主题的数据建模工作,并完成相关的ETL开发工作
4 参与/支持相关的前端BI业务分析的开发和实施工作
5 参与数据管控平台的开发和实施工作
任职资格:
1本科以上学历,计算机或大数据相关专业,五年以上工作经验
2 三年以上企业数据仓库相关工作和项目实施经验,参与过至少一个中大型项目或平台的开发实施工作,有制造业企业数据仓库(ODS/DW/DM)或互联网金融平台开发经验者,熟悉制造行业ERP/CRM/财务系统或有SAP BW项目实施经验者优先考虑
3有数据管控(包括但不限于主数据管理、元数据管理、数据质量管理、数据安全管理等)项目或平台开发、实施经验者优先考虑
4熟悉数据仓库原理和开发实施流程,熟悉OLTP和OLAP系统设计原理,熟悉维度模型和OLAP实现方式,熟悉Cube原理和实现机制,熟悉OLAP多维分析如钻取、切片、切块及旋转等,有数据平台指标库或标签库开发经验者优先考虑
5 丰富的ETL设计和开发经验,精通Informatica、DataStage、SSIS、Kettle等ETL开发工具,熟悉Control-M,Taskctl,Teradata Automation等ETL调度工具或自研发工具。
6熟悉Linux操作系统,精通Java、Python、Perl、Shell Scripts等语言者优先考虑
7精通SQL Server、Oracle、DB2、MySQL、PostgreSQL等关系型数据库的一种或多种,熟悉PL/SQL,有一定的数据建模能力
8熟悉列式数据库和MPP架构及原理,熟悉Teradata、Vertica、Aster等MPP数据库并有相关实施经验者优先考虑
9熟悉分布式数据存储和分布式数据处理机制,熟悉Hadoop(包括但不限于HDFS、HBase、Hive、MapReduce、Yarn、Zookeeper等)、Spark(包括但不限于Spark SQL、Spark Streaming和MLlib等)框架和实现机制,有相关系统设计和开发经验者优先考虑
10熟悉SAS,SPSS工具和R语言并有相关数据分析和挖掘项目开发经验者优先考虑
11 熟悉OLAP分析工具和前端可视化工具如SSAS/SSRS、Oracle Essbase、Tableau、Qlikview、SAP BO等优先考虑
12学习能力和沟通能力强,团队合作意识佳。可以独立完成开发工作,乐于挑战困难。
职能类别: 互联网软件开发工程师
公司介绍
当前华院主营业务为深度孵化并且致力于打造大数据产业生态圈 ,形成孵化企业资源共享,协同发展。已与腾讯、阿里等多家一线企业达成战略合作。
总部设在上海,在北京、广州、西安、成都、青岛、杭州、乌鲁木齐设有子分公司/办事处;中国香港、美国硅谷、澳大利亚墨尔本设立海外研究机构;
联系方式
- 公司地址:上班地址:上海