大数据工程师(数据抓取爬虫方向)
北京塔塔信息咨询有限公司
- 公司规模:50-150人
- 公司行业:互联网/电子商务
职位信息
- 发布日期:2017-02-16
- 工作地点:北京
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:本科
- 语言要求:英语 良好
- 职位月薪:1-1.5万/月
- 职位类别:软件工程师
职位描述
职位描述:
岗位职责:
1.参与核心爬虫系统架构设计,数据存储结构设计。
2.负责网络爬虫的核心技术研究和开发,参与各种核心搜索策略,算法,数据聚类,重组的设计和开发。
3.设计策略和算法,提升网页抓取效率和质量。
岗位要求:
1、计算机软件相关专业本科及以上学历,基础知识扎实;
2、五年以上JAVA WEB开发工作经验,扎实的技术功底;
3、熟悉常用信息抓取策略和数据重组算法。精通数据抓取和整合技术,从结构化的和非结构化的数据中获取信息,掌握正规表达式。
4、熟悉大规模网页爬取,深度网页爬取,熟悉nutch, hadoop,elasticsearch等工具优先。
5、具有能解决项目中疑难技术问题能力;
举报
分享
岗位职责:
1.参与核心爬虫系统架构设计,数据存储结构设计。
2.负责网络爬虫的核心技术研究和开发,参与各种核心搜索策略,算法,数据聚类,重组的设计和开发。
3.设计策略和算法,提升网页抓取效率和质量。
岗位要求:
1、计算机软件相关专业本科及以上学历,基础知识扎实;
2、五年以上JAVA WEB开发工作经验,扎实的技术功底;
3、熟悉常用信息抓取策略和数据重组算法。精通数据抓取和整合技术,从结构化的和非结构化的数据中获取信息,掌握正规表达式。
4、熟悉大规模网页爬取,深度网页爬取,熟悉nutch, hadoop,elasticsearch等工具优先。
5、具有能解决项目中疑难技术问题能力;
职能类别: 软件工程师
关键字: 软件工程师 数据爬虫方向 大数据处理
公司介绍
塔塔数据--北京塔塔信息咨询有限公司,2007年起专注于为银行、政府、科研机构、征信机构、500强企业提供宏观、微观专业大数据服务的经济数据供应商。“塔塔大数据”积累了业内最为丰富的宏观经济运行数据、最完整的全行业分析数据 ,以及最具竞争分析价值的个体调查微观数据,支持从宏观到行业和个体的面-线-点全方位经济数据分析模式。
以此雄厚的数据资源为依托,“塔塔数据”已经建立起分别针对于集团用户和个人用户的大型经济数据处理服务平台。在集团业务方面,公司研发了集合各种数据智能提取、数据挖掘算法及数据可视化功能的数据预警预测系统,为银行、政府、高校、图书馆等集团客户提供一站式数据解决方案;在个人客户方面,公司推出创新型的自助网络数据查询平台——数据圈,为个人用户提供专业、周全、高效的大数据服务平台。
面对大数据席卷而来的浪潮,塔塔资讯在网罗企业信息的基础上向征信方向拓展,建立多维度的企业评价视角,为企业价值评估、投资决策提供及时、完备的数据参考。
本公司以创造和谐氛围、让员工愉快工作为企业文化宗旨,用人方面主张能力至上,相信每一个加入公司的人都会在公司当中找到适合自己的工作岗位。欢迎各位有志之士及应届毕业生加盟!
网址:www.datesdata.com
以此雄厚的数据资源为依托,“塔塔数据”已经建立起分别针对于集团用户和个人用户的大型经济数据处理服务平台。在集团业务方面,公司研发了集合各种数据智能提取、数据挖掘算法及数据可视化功能的数据预警预测系统,为银行、政府、高校、图书馆等集团客户提供一站式数据解决方案;在个人客户方面,公司推出创新型的自助网络数据查询平台——数据圈,为个人用户提供专业、周全、高效的大数据服务平台。
面对大数据席卷而来的浪潮,塔塔资讯在网罗企业信息的基础上向征信方向拓展,建立多维度的企业评价视角,为企业价值评估、投资决策提供及时、完备的数据参考。
本公司以创造和谐氛围、让员工愉快工作为企业文化宗旨,用人方面主张能力至上,相信每一个加入公司的人都会在公司当中找到适合自己的工作岗位。欢迎各位有志之士及应届毕业生加盟!
网址:www.datesdata.com
联系方式
- 公司地址:上班地址:复兴路17号国海广场A座7层