爬虫工程师
成都数融科技有限公司
- 公司规模:少于50人
- 公司性质:民营公司
- 公司行业:计算机软件 金融/投资/证券
职位信息
- 发布日期:2017-01-31
- 工作地点:成都-高新区
- 招聘人数:2人
- 工作经验:1年经验
- 职位月薪:0.6-1.2万/月
- 职位类别:高级软件工程师
职位描述
职位描述:
1、参与爬虫系统的架构设计与开发;
2、具有实际爬虫开发、内容提取工作经验1年以上;
3、负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析;
4、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;
5、能独立解决实际开发过程中遇到的各类问题;
任职要求: 1、熟悉linux平台开发,3年以上Java、python或C/C++开发经验;
2、精通信息抓取和整合技术,从结构化的和非结构化的数据中获取信息;
3、熟悉Mysql,mongdb三者至少之一,有过数据库调优和海量数据存储经验优先;
4、具有搜索相关技术研发经验者优先;
5、具有数据挖掘、自然语言处理、信息检索、机器学习背景者优先;
6、有nutch,heritrix,scrapy抓取经验或者分布式抓取经验者优先;
7、熟悉搜索引擎和个性化推荐相关技术,精通主流分词算法、分类、提取摘要、大规模网页聚类、索引、检索等相关开发经验者优先。
举报
分享
1、参与爬虫系统的架构设计与开发;
2、具有实际爬虫开发、内容提取工作经验1年以上;
3、负责设计和开发分布式网络爬虫系统,进行多平台信息的抓取和分析;
4、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;
5、能独立解决实际开发过程中遇到的各类问题;
任职要求: 1、熟悉linux平台开发,3年以上Java、python或C/C++开发经验;
2、精通信息抓取和整合技术,从结构化的和非结构化的数据中获取信息;
3、熟悉Mysql,mongdb三者至少之一,有过数据库调优和海量数据存储经验优先;
4、具有搜索相关技术研发经验者优先;
5、具有数据挖掘、自然语言处理、信息检索、机器学习背景者优先;
6、有nutch,heritrix,scrapy抓取经验或者分布式抓取经验者优先;
7、熟悉搜索引擎和个性化推荐相关技术,精通主流分词算法、分类、提取摘要、大规模网页聚类、索引、检索等相关开发经验者优先。
职能类别: 高级软件工程师
关键字: 爬虫 pathon nutch 搜索引擎
公司介绍
成都数融科技有限公司成立于2015年,依托中国科学院计算技术研究所,在互联网信息挖掘、分布式并行计算、大数据系统等领域拥有领先的技术经验和产品,是目前国内少数掌握企业级大数据和实时金融风险分析等核心技术的高科技公司,公司立志于融合金融机构内部和外部的数据,基于客户需求,提供领先、全面、有效的大数据风控解决方案,成为国内领先的全方位的金融大数据风控解决方案提供商。
公司创始人是国家信标委的《大数据安全标准》、《大数据行业应用标准》、《大数据技术标准》等大数据国家标准的参与制定者之一。
公司总部位于成都高新区, 无论你是初出茅庐,还是超级***,这里充满激情,这里给你舞台,这里崇尚技术,这里给你挑战。
如果你不安现状,如果你向往挑战,那么来吧,数融给你舞台,数融给你挑战。
我们为员工提供极富吸引力的薪酬,同时还能获得员工期权,让你成为公司的主人翁之一。
公司创始人是国家信标委的《大数据安全标准》、《大数据行业应用标准》、《大数据技术标准》等大数据国家标准的参与制定者之一。
公司总部位于成都高新区, 无论你是初出茅庐,还是超级***,这里充满激情,这里给你舞台,这里崇尚技术,这里给你挑战。
如果你不安现状,如果你向往挑战,那么来吧,数融给你舞台,数融给你挑战。
我们为员工提供极富吸引力的薪酬,同时还能获得员工期权,让你成为公司的主人翁之一。
联系方式
- 公司地址:上班地址:天府新谷