爬虫开发工程师&数据采集工程师
上海晟钧建筑工程有限责任公司
- 公司规模:50-150人
- 公司性质:民营公司
- 公司行业:建筑/建材/工程
职位信息
- 发布日期:2020-10-19
- 工作地点:上海-黄浦区
- 招聘人数:2人
- 工作经验:3-4年经验
- 学历要求:本科
- 职位月薪:1.5-2万/月
- 职位类别:数据采集工程师 爬虫开发工程师
职位描述
爬虫开发工程师/数据采集工程师
岗位职责:
1、负责数据抓取平台规划和建设,完成数据采集与爬取、解析处理和入库;
2、研究各种网页探寻特点和规律,负责网页信息抽取、数据清洗工作;
3、负责领域知识的定向爬取、深度提取和挖掘;
4、配合数据清洗、整理、去重和合并工作;
5、负责爬虫相关技术的创新和优化。
任职要求:
1、计算机相关专业,本科以上学历,3年以上爬虫领域工作经验,1年以上爬虫团队合作经验。
2、熟悉Python开发,熟悉wxpython,熟悉抓取框架,有完整的界面化爬虫平台开发经验;
3、熟悉Web抓取原理及技术实现细节,对HTTP协议和HTML有深入了解;
4、熟悉数据抓取和整合技术,从结构化和非结构化数据中提取信息;
5、熟悉反爬机制,能够通过逆向js脚本,获取参数,熟悉使用正则表达式/验证码加密处理/代理池,熟悉行为验证码识别、模拟登陆。
以下经验之一者优先考虑:
1、有房地产项目类数据爬取经验者优先
岗位职责:
1、负责数据抓取平台规划和建设,完成数据采集与爬取、解析处理和入库;
2、研究各种网页探寻特点和规律,负责网页信息抽取、数据清洗工作;
3、负责领域知识的定向爬取、深度提取和挖掘;
4、配合数据清洗、整理、去重和合并工作;
5、负责爬虫相关技术的创新和优化。
任职要求:
1、计算机相关专业,本科以上学历,3年以上爬虫领域工作经验,1年以上爬虫团队合作经验。
2、熟悉Python开发,熟悉wxpython,熟悉抓取框架,有完整的界面化爬虫平台开发经验;
3、熟悉Web抓取原理及技术实现细节,对HTTP协议和HTML有深入了解;
4、熟悉数据抓取和整合技术,从结构化和非结构化数据中提取信息;
5、熟悉反爬机制,能够通过逆向js脚本,获取参数,熟悉使用正则表达式/验证码加密处理/代理池,熟悉行为验证码识别、模拟登陆。
以下经验之一者优先考虑:
1、有房地产项目类数据爬取经验者优先
公司介绍
企业坚信:唯有客户认可,才能基业长青;唯有诚信,才能得到客户认可;唯有认真负责,才能获得诚信;铸就品质,只为客户满意才是认真负责的企业经营战略。
核心价值观:铸就品质,只为客户满意
关于团队:万事德为根,诚为本,德才兼备是打造培养人才团队的根本原则,只有具备了德才兼备的良好品质的员工才真正是***的财富
企业精神:德为根、诚为本、善为行、爱为心、廉为道
企业理念:一切利益永远要为品质让路
企业使命: 最受客户信任的企业
最受职员家庭尊重的企业
最具社会责任感的企业
我们需要这样的你:
我们不在乎你过往有多大的成就或受过多大的挫败;
我们不在乎你长的是否帅气或漂亮;
我们不在乎你是应届生还是工作经历丰富的人;
我们更在乎你是否有梦想,并且为自己梦想努力拼搏奋斗着的人!
在这里你得到的并非一份工作而已,更能收获到成长,成就,圆梦!
员工福利:
1、为让有梦想的你安心打拼,员工享有社保福利;
2、带薪假期:产假、婚假、丧假、病假、年假和国家规定的所有法定节假日;
3、节日福利的派发(中秋、端午、春节等);
4、为员工职业发展需要提供各种专业培训,并为优秀员工提供良好晋升发展机会。
核心价值观:铸就品质,只为客户满意
关于团队:万事德为根,诚为本,德才兼备是打造培养人才团队的根本原则,只有具备了德才兼备的良好品质的员工才真正是***的财富
企业精神:德为根、诚为本、善为行、爱为心、廉为道
企业理念:一切利益永远要为品质让路
企业使命: 最受客户信任的企业
最受职员家庭尊重的企业
最具社会责任感的企业
我们需要这样的你:
我们不在乎你过往有多大的成就或受过多大的挫败;
我们不在乎你长的是否帅气或漂亮;
我们不在乎你是应届生还是工作经历丰富的人;
我们更在乎你是否有梦想,并且为自己梦想努力拼搏奋斗着的人!
在这里你得到的并非一份工作而已,更能收获到成长,成就,圆梦!
员工福利:
1、为让有梦想的你安心打拼,员工享有社保福利;
2、带薪假期:产假、婚假、丧假、病假、年假和国家规定的所有法定节假日;
3、节日福利的派发(中秋、端午、春节等);
4、为员工职业发展需要提供各种专业培训,并为优秀员工提供良好晋升发展机会。
联系方式
- 公司地址:地址:span黄浦区绿地海外滩中心金融A座