爬虫开发工程师
上海旺翔文化传媒股份有限公司
- 公司规模:50-150人
- 公司性质:上市公司
- 公司行业:影视/媒体/艺术/文化传播
职位信息
- 发布日期:2019-09-20
- 工作地点:上海-普陀区
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:2.5-3万/月
- 职位类别:互联网软件开发工程师 大数据开发/分析
职位描述
岗位职责:
1、负责分布式网络爬虫系统平台开发、维护等工作;
2、负责海量数据的爬取、清洗、解析、入库;
3、解决爬虫系统平台数据爬取可配置化,实现按照配置进行自动化数据爬取、数据清洗、数据解析、入库。
任职要求:
1. 全日制本科以上学历,计算机相关专业;
2. 2年以上从事爬虫项目开发、内容提取等工作;
3. 熟悉Linux平台开发,并且熟悉多线程模型编程、网络编程,熟悉HTTP、TCP/UDP协议;
4. 精通网页抓取原理及技术,精通正则表达式,从结构化的和非结构化的数据中获取信息;
5. 精通Python编程语言;
6.熟悉Appium、Selenium、PhantomJS 、WebDriver等技术;
7. 有较强的工作责任心和良好的沟通协同能力,有钻研精神,对技术、大数据充满热情,有团队合作精神
8. 有百度、今日头条等一线互联公司从事爬虫技术开发者优先
9. 有大规模分布式海量数据处理经验优先(如Hadoop/Hbase/Spark/Strom/Flink等)。
职能类别:互联网软件开发工程师大数据开发/分析
公司介绍
上海旺翔文化传媒股份有限公司(股票代码:835063)成立于2011年,是一家集DSP,SSP,DMP,线下场景营销,海外流量业务的综合性移动数字营销广告传媒公司。
公司具有深度的海量国内外流量资源聚合能力,聚集三十大平台,12亿用户,22000家广告主,2.5亿日活,业务覆盖100个国家及地区。
公司拥有23项技术软件专利,创新开发三大技术引擎:超大数据运算引擎,深度SDK定制引擎,智能场景匹配引擎,精准定向广告投放,提升广告营销效果。
我们的战略合作覆盖百度,阿里,腾讯等超一流互联网企业,客户覆盖阿里,京东,苏宁,唯品会,1号店,草花,掌游,平安,招商银行等,汇聚国内外海量优质流量资源,提供整合跨国家、跨地区,跨平台,跨渠道的一站式解决服务。
公司官网:**********************/ ******************/(海外)
公众微信号:旺翔传媒
公司具有深度的海量国内外流量资源聚合能力,聚集三十大平台,12亿用户,22000家广告主,2.5亿日活,业务覆盖100个国家及地区。
公司拥有23项技术软件专利,创新开发三大技术引擎:超大数据运算引擎,深度SDK定制引擎,智能场景匹配引擎,精准定向广告投放,提升广告营销效果。
我们的战略合作覆盖百度,阿里,腾讯等超一流互联网企业,客户覆盖阿里,京东,苏宁,唯品会,1号店,草花,掌游,平安,招商银行等,汇聚国内外海量优质流量资源,提供整合跨国家、跨地区,跨平台,跨渠道的一站式解决服务。
公司官网:**********************/ ******************/(海外)
公众微信号:旺翔传媒
联系方式
- 公司地址:地址:span中江路879弄6号楼3楼