长沙招聘

此岗位人力外包vivo，双休

岗位职责
-负责爬虫系统的设计，开发
-负责解决爬虫系统遇到的常见问题
-优化爬虫性能，解决系统瓶颈
-承接业务的数据采集需求

任职要求
1.三年及以上工作经验，熟悉Linux开发环境，熟练掌握java编程语言，有分布式，并发编程经验者优先。
2.熟悉爬虫基本思想和原理，负责爬虫平台的设计，开发，优化等。
3.熟悉开源爬虫框架nutch/heritrix/webmagic/scrapy一种或多种者优先。
4.熟悉常用组件httpclient,jsoup,DOM解析，xpath,regex者优先。
5.有页面渲染技术项目经验者优先。
6.熟悉常用的大数据平台工具，熟悉hadoop,hbase,hive,kafka等优先。
7.有较强的动手能力，能够分析，解决问题，有责任心，具备良好沟通和团队合作能力。
职能类别：
爬虫开发工程师
关键字：
javalinuxkafkahadoophivehbase数据采集分布式大数据平台爬虫

上海微创软件股份有限公司于2002年由微软与上海市政府共同创办，是微软在华投资的***家合资公司。 微创始终秉承高标准的服务品质与“成就客户”的服务理念，在全球设有20余处交付中心，分布在中国、美国、日本、澳大利亚，与2500余家企业与政府客户达成了长期、稳定、友好的合作。