厦门招聘

职位描述：
岗位职责：
1、参与爬虫系统的架构设计与开发；
2、负责设计和开发多平台信息的抓取和分析；
3、设计爬虫策略和防屏蔽规则，提升网页抓取的效率和质量；
4、负责数据检索系统的开发和维护；
5、用脚本或程序对大规模数据进行处理和分析；
6、能独立解决实际开发过程碰到的各类问题。
技术要求：
1、熟悉linux平台操作，有2年以上Java开发经验；
2、熟悉信息抓取和整合技术，从结构化的和非结构化的数据中获取信息；
3、熟悉Mysql，redis，mongdb三者至少之一，有过数据库调优和海量数据存储经验优先；
4、有nutch+hbase，heritrix，webmagic抓取经验或者分布式抓取经验者优先；
5、有自然语言处理和数据挖掘相关经验的优先； 举报 分享

厦门集微科技有限公司(Xiamen Jiwei Technology Co.;Ltd）是北京百悟科技全资子公司，是具备国际水准的移动互联网商务平台技术和应用方案提供商，业务覆盖全球200多个国家、全国400多个城市，已为超过300万家企业提供专业的企业通信、云计算、大数据、物联网等服务，与几乎所有***互联网品牌客户达成战略合作关系，是互联网+领域的重要推动力量。