黔南招聘

职位描述：
岗位职责：
根据产品需求编写爬虫程序，进行互联网相关数据的抓取和解析。
   
1.维护优化现有爬虫程序，参与公司爬虫系统研发维护工作
    
    2.负责采集系统架构设计、下载策略、调度算法的设计和开发，实现大规模互联网数据的抓取。
   
3.分析已有采集系统的技术缺陷，对策略架构做出合理地调整和改进。
   
4.设计策略和算法，提升网页抓取的效率和质量，解决信息精准抽取等核心技术难题。
   
任职要求：
1. 掌握C++/Java/Python任意编程语言，熟悉常用的信息抓取策略
2. 熟悉Linux/Unix下系统环境，有系统开发经验更佳
3. 熟悉网络通信原理、了解TCP/IP 、HTTP、JSON、RESTful、oauth等
4. 熟悉WEB数据交互原理，有一定的HTML CSS JS基础
5. 有网页爬虫开发经验，掌握网络爬虫开发原理，能够总结分析不同网站的结构特点与规律
6. 对算法设计和数据结构有深刻的理解，精通网络编程
熟悉MongoDB、Redis、HBase等NoSQL服务 举报 分享

数联铭品科技有限公司（BBD），是国内最早探索和实践大数据技术和数字经济产业发展的高新技术企业之一，拥有完整的大数据综合服务产品线和丰富的行业解决方案，同时搭建了国内领先的企业数据库和模型库，具备强大的数据治理和建模能力，致力于打造“全球领先的大数据金融科技和政府治理智库服务机构” 。围绕一带一路、数字中国等国家战略，BBD构建了面向政府、企业、金融市场三大主体的业务体系和商业模式，形成价值叠加、功能联动的服务通链，覆盖信用体系建设、政府监管、金融风控、宏观经济、公共安全等多个领域。事实与预测，是我们为客户提供的两种核心价值，助力政府、企业和金融机构提升决策效力。