北京招聘

岗位职责

1. 负责公司产品的爬虫架构设计与开发，以及爬虫策略优化和反爬技术攻克等工作；
2. 设计和开发网络爬虫算法，从多平台大规模文本数据抓取、清洗、存储等设计开发工作；
3. 独立解决爬虫开发和维护过程中的各类问题；
4. 配合团队完成其他相关工作任务。

任职资格

1、计算机、数学或统计等相关专业本科及以上学历，2年以上的爬虫相关工作经验；

2、熟练掌握java或python编程语言，熟悉多线程编程，熟悉scrapy、pyspider、webmagic、nutch等其中一个或多个爬虫框架以及原理；

3、熟悉静态、动态网页等大规模文本数据的高效信息抽取、清洗、存储等技术；

4、熟悉网页抓取的原理和技术，精通正则表达式，熟悉网络协议及数据交换标准，能够快速解析各类结构化及非结构化数据；

4、有反爬相关问题处理经验，精通常用的爬虫技术及架构设计，并能快速开发实现；

5、具备良好的编程习惯和算法基础；

6、善于学习，热爱技术开发，善于团队协作，能积极主动地参与公司产品研发等相关工作。

7、有Redis、Memcache、Kafka、HBase、Lucene、ElasticSearch等相关框架使用经验的优先，有大规模分布式爬虫系统的开发经验优先；

上海晶确科技有限公司是一家具有自主研发能力且市场定位清晰的新兴大数据服务企业。

公司创始团队拥有丰富的市场调研与统计背景，深耕咨询行业二十余年，对大数据及人工智能技术有深刻的认识。公司经营业务与提供服务也一脉相承的注重帮助客户企业发现数据价值，实现数据变现。

公司现有经验丰富的项目管理团队，理念先进的产品团队与技术深厚的研发团队，目前在上海、北京、台北设立了办公室与研发中心。通过沉淀的企业运营知识专精，为客户提供经营数据分析、管理战略部署、商业决策优化、综合性智能解决方案等。

公司通过大数据处理技术与GIS地图处理技术，对企业经营数据进行分析处理并生成服务于客户企业经营的智能地图工具，快速定位并解决企业经营问题，现有服务业务范畴包括商圈布局、线路规划、商机导航、消费者精准营销等。目前提供服务按年收取业务服务费。

公司目前为康师傅、全家、德克士、百事国际等客户提供全面服务，所实施项目与解决方案成功为客户企业带来显著业绩提升并得到广泛认可。

公司将依托专业的团队与先进的理念，为客户企业提供不断精进发展的依托数据技术的解决方案，帮助企业完成智能转型并充分发挥数据价值。
 
我们的福利
全天免费茶点区、外部培训和交流机会、灵活的工作时间和休假政策、全额缴纳五险一金等