大数据ETL工程师
上海咪啰信息科技有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2019-10-20
- 工作地点:上海-浦东新区
- 招聘人数:5人
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:1-2万/月
- 职位类别:数据库工程师/管理员 系统集成工程师
职位描述
岗位职责:
1. 参与数据仓库和大数据平台的环境搭建、架构设计和程序开发;
2. 参与分布式结构化数据的数模设计;
3. 负责离线和在线数据的采集、清洗和加载;
4. 负责分布式批量计算、分布式内存计算、数据仓库类SQL查询统计等离线计算开发;
5. 参与实时数据流的数据处理、查询统计和分析预测等在线计算开发;
6. 基于公司业务,构建模型算法,发掘数据的价值;
7. 满足公司各部门日常的数据需求。
任职要求:
1. 具有ORACLE、mysql数据库开发经验,能力优秀者可放宽要求;
2. 有较好的数据库基础知识,精通SQL及调优;
3. 熟悉LINUX常用系统管理及文件管理命令,熟悉shell脚本编写;
4. 熟悉BI工具,如ETL工具kettle、informatic等;
5. 熟悉Hadoop、Hive、Spark,Storm,Kafka等技术和开发的优先考虑。
公司介绍
上海咪啰信息科技有限公司是上海海事大学在上海市全面推进国际航运中心和科创中心大背景下,结合行业特点和自身基础研究优势组建成立,咪啰公司以海事大学优秀青年教授担任法人代表,以博士研究生为核心主体团队,推动科研成果与企业实际生产需求紧密结合转化。公司以港航信息化为核心,在各关键物流节点开展管理信息系统自动化、智能化改造,前瞻应用VR技术、AI技术,并着眼优化上海口岸信息环境,辅助搭建上海航运物流信息大数据平台,主要经营范围包括数据服务平台建设,计算机软硬件、信息系统的研发及销售;技术开发,技术服务;数据采集、存储、开发、处理、服务和销售;大数据资源的整合、应用、开发、服务和运营。
公司依托上海海事大学资源和成果优势,并与北京师范大学、首都师范大学等建立密切联系,与德国汉堡大学等国外高校也建立了培训交流和互助机制,团队核心成员均在上海港航信息行业具备深厚的技术和业务优势,公司主持开发的码头生产系统智能化、自动化改造模块如自动配载系统、成本分析系统、自动泊位系统等广泛应用于上海国际港务集团股份有限公司各集装箱码头,辅助搭建的上海口岸大数据平台一期已基本完成,技术团队技术实力强大,软件生产和技术管理经验丰富。企业主要客户集中于上港集团、上海电子口岸(亿通国际)和振华重工等上海港航核心生产企业。作为一家新兴企业,在业务资源与科研成果的转化过程中,咪啰也得到了上海市科委、教委和经信委等政府主管机构的关注和支持。
公司依托上海海事大学资源和成果优势,并与北京师范大学、首都师范大学等建立密切联系,与德国汉堡大学等国外高校也建立了培训交流和互助机制,团队核心成员均在上海港航信息行业具备深厚的技术和业务优势,公司主持开发的码头生产系统智能化、自动化改造模块如自动配载系统、成本分析系统、自动泊位系统等广泛应用于上海国际港务集团股份有限公司各集装箱码头,辅助搭建的上海口岸大数据平台一期已基本完成,技术团队技术实力强大,软件生产和技术管理经验丰富。企业主要客户集中于上港集团、上海电子口岸(亿通国际)和振华重工等上海港航核心生产企业。作为一家新兴企业,在业务资源与科研成果的转化过程中,咪啰也得到了上海市科委、教委和经信委等政府主管机构的关注和支持。
联系方式
- 公司地址:地址:span芳甸路1155号浦东嘉里城L4