大数据开发工程师
成都迈思信息技术有限公司
- 公司规模:150-500人
- 公司性质:民营公司
- 公司行业:计算机软件
职位信息
- 发布日期:2019-11-15
- 工作地点:上海
- 招聘人数:2人
- 工作经验:2年经验
- 学历要求:招2人
- 语言要求:不限
- 职位月薪:1.5-2万/月
- 职位类别:数据库工程师/管理员
职位描述
工作范围:
?耐克采用了大数据技术来实现数据驱动的决策。我们希望扩大我们的数据工程团队来跟上步伐。
?作为一名数据工程师,你将与各种有才华的耐克团队成员一起工作,成为为耐克技术及其商业伙伴构建一流解决方案的驱动力,从事与供应链、商业、消费者行为和web分析等相关的开发项目。
工作职责:
?使用敏捷/ Scrum方法,与产品所有者、数据分析师和业务合作伙伴协作,设计和实现数据产品和功能
?为处理和存储大数据量的整体架构、框架和模式做出贡献
?研究、评估和利用以高容量数据处理为核心的新技术/工具/框架
?将产品待办事项转化为工程设计和逻辑工作单元
?对数据进行概要分析,以便设计可伸缩的解决方案
?为给定的技术场景定义并应用适当的数据获取和使用策略
?使用大数据生态系统中流行的工具和语言设计和实现分布式数据处理管道
?构建实用程序、用户定义函数、库和框架,以更好地启用数据流模式
?使用工作流编制工具实现复杂的自动化例程
?与架构、工程主管和其他团队合作,确保实施高质量的解决方案,并定义和遵守工程***实践
?预测、识别和解决与数据管理相关的问题,以提高数据质量
?构建并合并自动化的单元测试,并参与集成测试工作
?利用和推进持续集成和部署框架
解决数据问题并进行根本原因分析
跨团队工作,解决运营和绩效问题
以下的资历和技能将使你适合这个职位:
计算机科学或相关技术学科硕士/学士学位
?1年以上大型软件开发经验,2年以上大数据经验
有丰富的编程经验,Python或Scala优先
?具有复杂软件项目的设计、评估和执行经验
?丰富的Hadoop及相关处理框架经验,如Spark、Hive、Storm等。
熟悉RDBMS系统、SQL和SQL分析函数
熟悉Apache气流等工作流编制工具
?有使用Github或Bitbucket等源代码控制工具的经验
?具有性能和可伸缩性调优经验
?能够有效地影响团队成员和业务干系人,并与他们进行口头和书面沟通
?对新语言、新技术和新框架感兴趣并能快速上手
?敏捷/Scrum应用开发经验
以下技能和经验也与我们的整体环境有关,我们很高兴拥有:
?Java使用经验
?在公共云环境中工作的经验,尤其是AWS
?有使用雪花云等云仓库工具的经验
?有消息/流/复杂事件处理工具和框架的经验,如Kinesis、Kafka、Spark streaming、Flink、Nifi等。
有使用NoSQL数据存储的经验,如HBase, DynamoDB等。
?体验构建RESTful API以支持数据消费
?具有构建工具(如Terraform或CloudFormation)和自动化工具(如Jenkins或Circle CI)的经验
?具有持续开发、持续集成和自动化测试等实践经验
这些都是我们在自己的工作中所追求的特点。我们希望听到同样的候选人:
?渴望与你的队友合作,为一个问题想出最好的解决方案
?在快节奏、敏捷的环境中,具备在多个项目上交付成果的经验和能力
优秀的解决问题和人际沟通能力
?强烈的学习欲望和与他人分享知识
职能类别:数据库工程师/管理员
公司介绍
作为软件服务主要提供商,我们拥有专业的市场分析员,系统架构师,技术顾问,界面设计师,软件工程师,数据库管理工程师及质量管理工程师。我们提供基于面向服务架构(SOA)的企业信息系统服务,及具有创造性的用户界面设计,电子商务软件开发和事务流程自动化等快速优质的软件外包和离岸开发服务。我们的客户遍布于制造、金融服务、医疗、零售等行业,其中包括有世界排名前500强的高科技企业。并且在北美、日本建立了广泛的外包渠道,在业界有着突出的成绩。
在中国,我们***的外包研发中心建立在西部业务的福地四川成都,这里孕育着大批优秀的软件专业人才。在江苏常州,我们建立了面向华东地区的软件研发及外包业务中心,其中常州的软件研发项目入选当地领军型海归人才项目,并获得海归领军型人才项目专项资助。与此同时,常州的外包业务中心开始承接海外外包项目,特别是在美国的全球500强企业的离岸外包业务。在深圳及西安, 我们正在建设地区性软件研发及外包业务中心, 面向地区市场,并承揽海外业务。此外, 在美国硅谷,欧共体及卡尔加里我们都拥有自己的分公司,这使得我们的全球客户服务具备地理位置上的绝对优势。
MaesInfo is a leading provider of professional outsourcing service with a Global Development Center in Chengdu,China and as well as PM offices in the USA and Canada.MaesInfo engages in IT Outsourcing(ITO)and R&D while also developing its software products.MaesInfo's goal is to become China's IBM and we strive to be the leader of China's IT Outsourcing industry.
Our Global Software Development Center is located in Chengdu,China and offers a hotbed for nurturing the talent to develop and deploy the world's highest-quality software.With branches in Beijing, Silicon Valley and Calgary,we're well positioned to serve our customers globally around the clock.We offer a disciplined approach to offshore outsourcing for companies all over the world.Our high-quality and low-cost operating model allow us to pass on more than 50% cost savings to our clients while continuing to improve our productivity and predictability.
As a leading provider for Enterprise Information Systems based on Service Oriented Architecture(SOA),we stand out with an impressive track record across various industries all over the USA and Japan.Our top-notch team includes Business Analysts,Architects,Process Consultants,Interface Designers,Software Engineers,DBA and QA/QC Engineers etc.
欢迎浏览公司网站:*********************** ; **********************
公司网站:***********************
**********************
联系方式
- Email:454601362@qq.com
- 公司地址:南京云密城