北京招聘

爬虫开发工程师

职位描述：

1、负责设计和开发分布式的网络爬虫应用，进行互联网相关信息的抓取和分析；

2、完成定向数据的采集与爬取、解析处理、入库等数日常工作；

3、维护、优化现有的采集程序，提升爬虫的抓取效率和质量;

4、协助完成需求收集、分析，测试和部署，编写开发过程中涉及的相关文档。

任职要求：

1、具备Java两年以上开发经验，Java基础扎实，具备爬虫开发经验；

2、熟悉Java网络爬虫框架（electron、jsoup、Selenium、HttpClient、HtmlUnit等至少一种）；

3、熟练掌握HTML、CSS、Javascript等页面技术，熟悉angularjs；

4、熟练使用正则表达式、xpath、css选择器等页面提取方式，能够从结构化的和非结构化的数据中提取信息；

5、熟悉MySQL，MongoDB，oracle等数据库至少其中一种，熟悉SQL语言；

6、熟悉redis、RabbitMQ等消息中间件技术；

7、熟悉反爬虫技术，了解反爬机制；

8、熟悉应用服务器，熟悉Tomcat、Apache的配置及其优化；

9、熟悉ssh等常用框架，多线程、网络通信编程相关知识；

10、掌握linux基本操作，有python、nodejs相关经验者优先；

11、对APP采集有经验（包括抓包工具，APP模拟器等）者优先；

12、具有较强的分析和解决问题能力，有责任心，积极主动。

备注：以上2~11要求满足5条以上即可

迈思信息技术有限公司（MaesInfo）是一家布局全球的专业软件产品及软件开发公司，在美国硅谷，匹兹堡， 欧共体以及中国的多个城市都拥有自己的分公司，研发中心。公司主要提供IT服务（ITO），商业流程外 包（BPO）， 智能化解决方案和IT 培训，为客户提供高效率，高质量及高可预期性的服务。

作为软件服务主要提供商，我们拥有专业的市场分析员，系统架构师，技术顾问，界面设计师，软件工程师，数据库管理工程师及质量管理工程师。我们提供基于面向服务架构（SOA）的企业信息系统服务，及具有创造性的用户界面设计，电子商务软件开发和事务流程自动化等快速优质的软件外包和离岸开发服务。我们的客户遍布于制造、金融服务、医疗、零售等行业，其中包括有世界排名前500强的高科技企业。并且在北美、日本建立了广泛的外包渠道，在业界有着突出的成绩。

在中国，我们***的外包研发中心建立在西部业务的福地四川成都，这里孕育着大批优秀的软件专业人才。在江苏常州，我们建立了面向华东地区的软件研发及外包业务中心，其中常州的软件研发项目入选当地领军型海归人才项目，并获得海归领军型人才项目专项资助。与此同时，常州的外包业务中心开始承接海外外包项目，特别是在美国的全球500强企业的离岸外包业务。在深圳及西安， 我们正在建设地区性软件研发及外包业务中心， 面向地区市场，并承揽海外业务。此外， 在美国硅谷，欧共体及卡尔加里我们都拥有自己的分公司，这使得我们的全球客户服务具备地理位置上的绝对优势。

MaesInfo is a leading provider of professional outsourcing service with a Global Development Center in Chengdu,China and as well as PM offices in the USA and Canada.MaesInfo engages in IT Outsourcing(ITO)and R&D while also developing its software products.MaesInfo's goal is to become China's IBM and we strive to be the leader of China's IT Outsourcing industry.

Our Global Software Development Center is located in Chengdu,China and offers a hotbed for nurturing the talent to develop and deploy the world's highest-quality software.With branches in Beijing, Silicon Valley and Calgary,we're well positioned to serve our customers globally around the clock.We offer a disciplined approach to offshore outsourcing for companies all over the world.Our high-quality and low-cost operating model allow us to pass on more than 50% cost savings to our clients while continuing to improve our productivity and predictability.

As a leading provider for Enterprise Information Systems based on Service Oriented Architecture(SOA),we stand out with an impressive track record across various industries all over the USA and Japan.Our top-notch team includes Business Analysts,Architects,Process Consultants,Interface Designers,Software Engineers,DBA and QA/QC Engineers etc.

欢迎浏览公司网站：*********************** ; **********************

公司网站：***********************
          **********************