java工程师(爬虫) 工作地点:上海
上海动米网络科技有限公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:互联网/电子商务 计算机软件
职位信息
- 发布日期:2017-02-07
- 工作地点:上海-浦东新区
- 招聘人数:若干人
- 工作经验:2年经验
- 学历要求:大专
- 职位月薪:6-8千/月
- 职位类别:软件工程师
职位描述
职位描述:
职责:
1、负责爬虫核心技术的设计和开发;
2、设计爬取、调度和抽取算法,优化系统;
3、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;
4、对指定电商网站、移动端App进行数据抓取的开发工作;
5、及时解决爬虫抓取过程中出现的问题并不断维护、优化程序;
要求:
1、专科及以上学历,计算机相关专业;
2、2年以上JAVA开发的经验,1年以上爬虫开发经验;熟悉MySQL数据库,能协助检查数据入库环节;有多线程开发经验;会处理电商或其他网站反爬问题者优先;
3、熟悉整个爬虫的设计及实现流程,精通网页抓取原理及技术,精通正则表达式、HTML,JS,AJAX等网页信息抽取技术,从结构化的和非结构化的数据中获取信息;
4、有海量数据爬取经验者优先,有大数据量、大并发项目经验者优先,有互联网、电商平台、移动端数据爬取技术经验者优先;
5、有良好的代码编写习惯,具有良好的沟通、协作能力,有责任心;
举报
分享
职责:
1、负责爬虫核心技术的设计和开发;
2、设计爬取、调度和抽取算法,优化系统;
3、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量;
4、对指定电商网站、移动端App进行数据抓取的开发工作;
5、及时解决爬虫抓取过程中出现的问题并不断维护、优化程序;
要求:
1、专科及以上学历,计算机相关专业;
2、2年以上JAVA开发的经验,1年以上爬虫开发经验;熟悉MySQL数据库,能协助检查数据入库环节;有多线程开发经验;会处理电商或其他网站反爬问题者优先;
3、熟悉整个爬虫的设计及实现流程,精通网页抓取原理及技术,精通正则表达式、HTML,JS,AJAX等网页信息抽取技术,从结构化的和非结构化的数据中获取信息;
4、有海量数据爬取经验者优先,有大数据量、大并发项目经验者优先,有互联网、电商平台、移动端数据爬取技术经验者优先;
5、有良好的代码编写习惯,具有良好的沟通、协作能力,有责任心;
职能类别: 软件工程师
公司介绍
动米科技(AdRating)公司基于互联网大数据分析技术,提供专业的互联网广告和社交媒体营销的全流程监测、分析和优化解决方案。
作为中国领先的第三方网络广告和社交媒体营销的监测和分析提供商,动米科技为广告主、广告公司和行业提供中立、公正、科学、可靠的数据监测和有效的优化分 析,帮助广告主更加有效的制定网络广告和营销策略,优化网络广告投放和社交媒体营销,推动网络广告和营销行业的创新与发展。
AdRating目前日均处理数据超过1TB,拥有日均处理数十亿次广告请求的大数据处理能力,累计存储、处理数据超过1PB。AdRating独特的“双引擎”广告和营销监测技术,可以帮助广告主及其代理公司、网络媒体有效评估和优化数字广告和社交营销效果,提升媒介投资回报。
目前,众多国际知名品牌都在使用 AdRating的产品和服务优化其数字广告投入,提升广告投资回报。
作为中国领先的第三方网络广告和社交媒体营销的监测和分析提供商,动米科技为广告主、广告公司和行业提供中立、公正、科学、可靠的数据监测和有效的优化分 析,帮助广告主更加有效的制定网络广告和营销策略,优化网络广告投放和社交媒体营销,推动网络广告和营销行业的创新与发展。
AdRating目前日均处理数据超过1TB,拥有日均处理数十亿次广告请求的大数据处理能力,累计存储、处理数据超过1PB。AdRating独特的“双引擎”广告和营销监测技术,可以帮助广告主及其代理公司、网络媒体有效评估和优化数字广告和社交营销效果,提升媒介投资回报。
目前,众多国际知名品牌都在使用 AdRating的产品和服务优化其数字广告投入,提升广告投资回报。
联系方式
- 公司地址:上班地址:上海市陆家嘴浦东南路379号金穗大厦14A