上海 [切换城市] 上海招聘

ETL开发工程师

上海犀语科技有限公司

  • 公司规模:少于50人
  • 公司性质:创业公司
  • 公司行业:互联网/电子商务

职位信息

  • 发布日期:2020-11-18
  • 工作地点:上海-杨浦区
  • 招聘人数:1人
  • 工作经验:3-4年经验
  • 学历要求:本科
  • 职位月薪:1.5-2万/月
  • 职位类别:ETL开发工程师

职位描述

1、负责项目中数据处理工作,分析原始数据并采用合适的算法,对数据去重、清洗、分析、转换与入库;


2、负责数据仓库ETL流程的优化及解决ETL相关技术问题;


3、整体考虑ETL的架构、性能、存储、调度等问题 ;


4、钻研业务,能够更为深层次地理解业务数据。




任职要求:


1、两年以上ETL相关的工作经验,必须要有kettle经验


2、精通hive,sparksql熟悉其基本理论。有过hive,sparksql调优解决SQL性能问题经验。 


3、精通关系型数据库理论,熟悉掌握主流数据库系统中的一种或多种,例如Oracle、DB2、MYSQL、SQL Server; 


4、精通SQL语句,对SQL查询优化有丰富的经验,熟悉PL/SQL,熟悉存储过程、函数、包、触发器等的开发; 


5、了解ETL架构,有一定的ETL开发经验,了解日常作业的部署和调度; 


6、至少熟悉一种ETL开发工具,如DataX,flume,sqoop,Kettle等; 


7、掌握Shell脚本编写,至少掌握一种编程语言如Python,Java,Scala等,Python佳; 


8、熟悉Hadoop,Spark,Hive,HBase,Docker者优先;

职能类别:ETL开发工程师

关键字:kettle

公司介绍

上海犀语科技有限公司是一家致力于新一代智能化金融资讯服务的创新公司,采用的国际领先的中文自然语言处理(NLP)技术和大数据分析及智能算法技术,为金融机构提供具价值的数据分析,资讯文本和决策系统等产品和服务。犀语科技以数据化、自动化、智能化方式来支持金融客户拥有及时、精确、全面的洞察力,从而高效,优质地做出判断和决策。
创业团队的核心成员来自复旦大学、交通大学、中欧国际商学院、上海财经大学、中科院大学等高等院校,由大数据、人工智能和金融行业的技术专家、科学家和金融专家组成,拥有长达十五年的技术与产品沉淀和丰富的金融行业的实践经验,积累了大量的成功案例。
我们坐落于五角场创智天地,毗邻五角场商圈,与复旦大学、上海财经大学等知名高校相邻,坐拥繁华的商业气息,亦不失浓郁的学术氛围;
我们为你提供良好的职业平台和极大的发展空间,你可以尽情发挥,展现自我,让你在最短的时间内得到***的提升;
我们期待志同道合的你,与我们共同奋斗,并肩走向我们的未来!

联系方式

  • 公司地址:地址:span政学路77号INNOSPACE 大厦