北京 [切换城市] 北京招聘

大数据开发工程师/hadoop开发/hadoop大数据构架师

大连隆基信息技术有限公司

  • 公司规模:150-500人
  • 公司性质:民营公司
  • 公司行业:计算机软件

职位信息

  • 发布日期:2021-01-14
  • 工作地点:大连-高新园区
  • 招聘人数:2人
  • 工作经验:5-7年经验
  • 学历要求:大专
  • 职位月薪:1.5-2.5万/月
  • 职位类别:大数据开发工程师

职位描述

熟悉并理解所有Hadoop生态系统组件和Hadoop管理基础知识

对底层Hadoop架构概念和分布式计算有较强的理解范例

具备大规模数据处理的Hadoop api和MapReduce任务开发经验。

有使用SparkSQL和Spark Streaming或Apache的Apache Spark编程经验风暴

有使用Hive、PIG、Spark、MapReduce等主要组件的经验?有在至少一个数据存储中使用NoSQL的经验——HBase, Cassandra, MongoDB

有Hadoop集群和自动扩展的经验。

熟悉apache Kafka和apache Flume

了解Spark和Kafka与多个Spark任务的集成,以便从这些任务中消费消息多个卡夫卡分区了解基于Apache Oozie的工作流程

需要阿里巴巴云服务方面的实际经验,以及其他云平台的经验例如AWS和/或微软Azure将是一个额外的优势?数据集成工具认证,包括阿里巴巴云大数据、Informatica、Talend、Azure数据工厂或类似的东西将受到欢迎

充分理解ETL方法在多层堆栈中,与大数据系统集成比如Hadoop和Cassandra。

有BI和数据分析数据库的经验有将业务问题/挑战转化为考虑安全的技术解决方案的经验;性能、可伸缩性等。

具有企业级解决方案实施经验。

了解大数据架构模式[Lambda, Kappa]

具有企业应用绩效标杆的经验?数据安全经验(在移动中,在静止中)强大的UNIX操作系统概念和shell脚本编写知识

工作内容参考

8年以上软件开发经验,擅长Java/Python/Scala

体验微服务/服务网格架构

5年以上MySQL或PostgreSQL经验

体验Memcached/Redis等缓存

具有RabbitMQ/Kafka等排队系统的经验

有使用TLS/反向代理/负载均衡器的经验

体验过MR/Hdfs/Hive/Spark/Sqoop/Druid等Hadoop生态系统

根据特定要求设计和构建工具的经验

建立和维护数据科学平台的经验

熟悉常用的Linux命令和Linux脚本语言

具有像Jenkins/JenkinsX/Spinnaker这样的CI/CD经验



商务英语

福利待遇:

1、13薪+年终奖(1-3个月)带薪年假10天+带薪病假12天+六险一金(全额基数缴纳保险公积金)+年度体检+礼品(生日、结婚、生育、端午、中秋等) ;

2、提供员工班车,日常工作餐,带薪年假,外地员工宿舍,自驾员工提供免费停车场。

3、多元化的员工培训(技能培训、拓展培训、英语培训、储备干部培训等);

3、健全的员工关怀机制,公司设有健身俱乐部,提倡员工健康生活,快乐工作;

4、公司内部培训和晋升体系完善,每年有国外出差工作机会,每年度薪资涨幅美丽;

公司介绍

大连隆基科技始创于2009年,是一家以计算机软件技术为核心,通过软硬件产品结合研发的策略,为各行业提供优质的信息化产品及解决方案的高科技公司。业务范围覆盖技术咨询、调研分析、方案设计、软件开发、系统集成、售后支持等服务,专注于高科技、金融、医药、制作等领域并积累了丰富的经验。
隆基通过多年积累,已经形成了包括:行业解决方案、应用解决方案、工具平台解决方案、企业基础数据平台解决方案、基础设施平台等多种服务于企业全面IT战略的综合解决方案。提供的服务涵盖了“企业咨询服务、企业数据服务、企业应用服务、企业治理服务”全部领域。

隆基总部位于大连,在上海、北京等地分别设立研发团队,形成了一个包含资深业务专家、项目经验丰富的管理人员及优秀的技术研发人才在内的团队。

公司将以绿色IT战略、绿色IT咨询服务为宗旨,将帮助您低碳减排。为客户提供先进的技术,提供安全、可靠、高质量、易扩展的行业解决方案;以专业化的服务宗旨,帮助客户实现信息化管理的***实践方式,以满足客户在业务快速发展下的不同需求。

联系方式

  • Email:grace.zhao@gaoxinjob.com
  • 公司地址:大连 (邮编:116000)
  • 电话:17741137548