大数据开发工程师/hadoop开发/hadoop大数据构架师
大连隆基信息技术有限公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2021-01-14
- 工作地点:大连-高新园区
- 招聘人数:2人
- 工作经验:5-7年经验
- 学历要求:大专
- 职位月薪:1.5-2.5万/月
- 职位类别:大数据开发工程师
职位描述
熟悉并理解所有Hadoop生态系统组件和Hadoop管理基础知识
对底层Hadoop架构概念和分布式计算有较强的理解范例
具备大规模数据处理的Hadoop api和MapReduce任务开发经验。
有使用SparkSQL和Spark Streaming或Apache的Apache Spark编程经验风暴
有使用Hive、PIG、Spark、MapReduce等主要组件的经验?有在至少一个数据存储中使用NoSQL的经验——HBase, Cassandra, MongoDB
有Hadoop集群和自动扩展的经验。
熟悉apache Kafka和apache Flume
了解Spark和Kafka与多个Spark任务的集成,以便从这些任务中消费消息多个卡夫卡分区了解基于Apache Oozie的工作流程
需要阿里巴巴云服务方面的实际经验,以及其他云平台的经验例如AWS和/或微软Azure将是一个额外的优势?数据集成工具认证,包括阿里巴巴云大数据、Informatica、Talend、Azure数据工厂或类似的东西将受到欢迎
充分理解ETL方法在多层堆栈中,与大数据系统集成比如Hadoop和Cassandra。
有BI和数据分析数据库的经验有将业务问题/挑战转化为考虑安全的技术解决方案的经验;性能、可伸缩性等。
具有企业级解决方案实施经验。
了解大数据架构模式[Lambda, Kappa]
具有企业应用绩效标杆的经验?数据安全经验(在移动中,在静止中)强大的UNIX操作系统概念和shell脚本编写知识
工作内容参考
8年以上软件开发经验,擅长Java/Python/Scala
体验微服务/服务网格架构
5年以上MySQL或PostgreSQL经验
体验Memcached/Redis等缓存
具有RabbitMQ/Kafka等排队系统的经验
有使用TLS/反向代理/负载均衡器的经验
体验过MR/Hdfs/Hive/Spark/Sqoop/Druid等Hadoop生态系统
根据特定要求设计和构建工具的经验
建立和维护数据科学平台的经验
熟悉常用的Linux命令和Linux脚本语言
具有像Jenkins/JenkinsX/Spinnaker这样的CI/CD经验
商务英语
福利待遇:
1、13薪+年终奖(1-3个月)带薪年假10天+带薪病假12天+六险一金(全额基数缴纳保险公积金)+年度体检+礼品(生日、结婚、生育、端午、中秋等) ;
2、提供员工班车,日常工作餐,带薪年假,外地员工宿舍,自驾员工提供免费停车场。
3、多元化的员工培训(技能培训、拓展培训、英语培训、储备干部培训等);
3、健全的员工关怀机制,公司设有健身俱乐部,提倡员工健康生活,快乐工作;
4、公司内部培训和晋升体系完善,每年有国外出差工作机会,每年度薪资涨幅美丽;
公司介绍
隆基通过多年积累,已经形成了包括:行业解决方案、应用解决方案、工具平台解决方案、企业基础数据平台解决方案、基础设施平台等多种服务于企业全面IT战略的综合解决方案。提供的服务涵盖了“企业咨询服务、企业数据服务、企业应用服务、企业治理服务”全部领域。
隆基总部位于大连,在上海、北京等地分别设立研发团队,形成了一个包含资深业务专家、项目经验丰富的管理人员及优秀的技术研发人才在内的团队。
公司将以绿色IT战略、绿色IT咨询服务为宗旨,将帮助您低碳减排。为客户提供先进的技术,提供安全、可靠、高质量、易扩展的行业解决方案;以专业化的服务宗旨,帮助客户实现信息化管理的***实践方式,以满足客户在业务快速发展下的不同需求。
联系方式
- Email:grace.zhao@gaoxinjob.com
- 公司地址:大连 (邮编:116000)
- 电话:17741137548