数据开发工程师(数仓)
好屋
- 公司规模:1000-5000人
- 公司性质:民营公司
- 公司行业:房地产
职位信息
- 发布日期:2020-03-18
- 工作地点:上海
- 招聘人数:1人
- 工作经验:5-7年经验
- 学历要求:本科
- 职位月薪:2-3万/月
- 职位类别:大数据开发工程师
职位描述
主要职责
1.参与公司大数据平台相关项目的技术开发实现,参与大数据相关系统架构设计并负责产品的实时业务和离线业务的研发;
2.正确理解业务需求,使用ETL工具(如Sqoop/Flume/Kafka等)完成各类数据源的数据整合、抽取工作;使用大数据组件(如Azkaban/Oozie等)完成资源、系统任务调度及数据监控;使用SparkSQL、HiveSQL等完成数据的逻辑处理及数据清洗工作;
3.根据业务需求设计模型并按照模型设计完成开发工作并完成单元测试、集成测试和用户测试工作,并持续进行模型的优化;
4.负责数据平台的开发及运维,保障系统稳定及数据质量;
5.参与数据管理体系设计,数据建模管理、数据采集管理、数据清洗管理、数据质量管理、数据发布管理等业务及技术框架及流程;
6.负责撰写相关系统开发文档
任职要求:
1.本科及以上学历,计算机相关专业,至少3年大数据工作经验.
2.强的编程和数据工具运用能力,能熟练java、scala、python编程语言
3.有数据仓库、数据建模工作经验,了解数仓方法论,有用户画像、推荐系统经验优先。
4.熟悉企业级Linux/Unix操作系统,熟悉Shell脚本编程;
5.有Hadoop,Hive,Spark,Kafka,flink,ElasticSearch或者其他的大数据工具的使用经验;
6.有大数据相关组件维护和性能调优经验
职能类别:大数据开发工程师
公司介绍
好屋是领先的数据化房产服务平台。通过对房产大数据的开发、整合与应用,我们为客户提供智能高效的数据营销、数据金融和数据资产服务。同时,基于智慧、快速、开放的平台优势,好屋深度链接服务开发商、经纪机构、购房者、金融机构和智能科技、康养等,构建了一个泛房地产全周期的数字服务生态圈。
联系方式
- 公司地址:地址:span北京市朝阳区光华路2号阳光100D座优客工厂