大数据事业部数据采集工程师
北京牡丹电子集团有限责任公司
- 公司规模:500-1000人
- 公司性质:国企
- 公司行业:计算机软件 电子技术/半导体/集成电路
职位信息
- 发布日期:2015-07-07
- 工作地点:北京
- 招聘人数:1
- 工作经验:2年
- 学历要求:大专
- 语言要求:英语良好
- 职位月薪:面议
- 职位类别:互联网软件开发工程师
职位描述
岗位职责:
1、主要对企业级数据进行采集处理;
2、编写爬虫程序实现对互联网网站、网页内容,静态文件的爬取、采集和数据抽取等工作;
3、对爬取的内容进行提取、处理、优化、过滤,审核,入库等操作;
4、针对不同网站,编写及维护网页抽取配置;
5、通过分布式采集技术实现大数据量的抓取;
6、有购物网站采集经验优先。
技能要求:
1、熟悉java编程语言,熟悉多线程编程和分布式数据处理;
2、熟悉Html,XML网页标记语言,熟悉xpath,正则表达式网页解析语言;
3、熟悉Mysql,Sqlserver主流数据库管理系统;
4、有数据抓取处理实践经验者优先;
5、有编写调度器、NOSQL分布式经验者优先。
任职要求:
1、大专以上学历,2年以上工作经验;
2、具有高度的工作责任心和敬业精神;
3、有良好沟通技术和团队合作精神。
1、主要对企业级数据进行采集处理;
2、编写爬虫程序实现对互联网网站、网页内容,静态文件的爬取、采集和数据抽取等工作;
3、对爬取的内容进行提取、处理、优化、过滤,审核,入库等操作;
4、针对不同网站,编写及维护网页抽取配置;
5、通过分布式采集技术实现大数据量的抓取;
6、有购物网站采集经验优先。
技能要求:
1、熟悉java编程语言,熟悉多线程编程和分布式数据处理;
2、熟悉Html,XML网页标记语言,熟悉xpath,正则表达式网页解析语言;
3、熟悉Mysql,Sqlserver主流数据库管理系统;
4、有数据抓取处理实践经验者优先;
5、有编写调度器、NOSQL分布式经验者优先。
任职要求:
1、大专以上学历,2年以上工作经验;
2、具有高度的工作责任心和敬业精神;
3、有良好沟通技术和团队合作精神。
公司介绍
北京牡丹电子集团有限责任公司成立于1973年,是我国著名的传统电视生产厂商,创造了家喻户晓的"中国之花"牡丹品牌。
近年来,牡丹集团强力推进产学研合作、产业链合作和国际化合作,研发推出了基于创意设计的数字文化创新成果和应用解决方案,实现了从传统电视生产商到数字电视应用标准、技术、产品和服务的提供商的战略转型。目前,集团主持和参与制定国家、行业标准几十项,推出了系列数字文化创意解决方案和数字文化创意产品,已经探索出一条以文化创意带动数字信息技术发展的创新之路,正在着力打造北京中国特色世界城市建设进行过程中的中国名片。
展望未来,我们相信,牡丹未来发展的步伐将更加稳健,牡丹人的前进动力将更加充足,牡丹的发展前景将更加辉煌。
自2012年以来,牡丹集团与多家高校院所开展战略合作并建立舆情信息研究联合实验室,专注于新一代网络信息技术的研发应用。
2014年正式成立大数据事业部,以舆情服务为起点,以“创新 创造 价值”为企业文化,坚持“专注 专业 专心”的价值理念,以满足用户需求为第一出发点,力争成为国际领先的大数据内容服务提供商。
近年来,牡丹集团强力推进产学研合作、产业链合作和国际化合作,研发推出了基于创意设计的数字文化创新成果和应用解决方案,实现了从传统电视生产商到数字电视应用标准、技术、产品和服务的提供商的战略转型。目前,集团主持和参与制定国家、行业标准几十项,推出了系列数字文化创意解决方案和数字文化创意产品,已经探索出一条以文化创意带动数字信息技术发展的创新之路,正在着力打造北京中国特色世界城市建设进行过程中的中国名片。
展望未来,我们相信,牡丹未来发展的步伐将更加稳健,牡丹人的前进动力将更加充足,牡丹的发展前景将更加辉煌。
自2012年以来,牡丹集团与多家高校院所开展战略合作并建立舆情信息研究联合实验室,专注于新一代网络信息技术的研发应用。
2014年正式成立大数据事业部,以舆情服务为起点,以“创新 创造 价值”为企业文化,坚持“专注 专业 专心”的价值理念,以满足用户需求为第一出发点,力争成为国际领先的大数据内容服务提供商。
联系方式
- 公司地址:上班地址:海淀区花园路2号