南京 [切换城市] 南京招聘南京计算机软件招聘南京高级软件工程师招聘

Python 爬虫和数据处理工程师

上海若雅软件系统有限公司

  • 公司规模:50-150人
  • 公司性质:合资(非欧美)
  • 公司行业:计算机软件

职位信息

  • 发布日期:2017-11-17
  • 工作地点:上海-浦东新区
  • 工作经验:2年经验
  • 学历要求:大专
  • 语言要求:英语熟练
  • 职位月薪:1-1.5万/月
  • 职位类别:高级软件工程师  

职位描述

职位描述:
1)根据设计文档或需求说明完成代码编写,调试,测试和维护;
2)对需要的网站、微信公众号、微博账号、今日头条等信息源的Python爬虫程序的开发,以及对抓取的数据的大数据处理和图形化展示程序的开发;
3)技术文档的编辑、维护工作等。
岗位要求:
1)技能要求
1. 熟练掌握 Unix-Like 环境下开发技能,能独立完成爬虫基础设施的建设
2. 熟练掌握任意一门编程语言(Python 优先),掌握主流的编程范式
3. 至少使用过一种 Python 的爬虫框架,包括但不限于 Scrapy / Portia / PySpider 等
4. 对 HTTP 协议和 W3C 的常见规范有了解,理解 CORS / Proxy
5. 至少用过一款网络嗅探工具(Wireshark、Charles、Fiddler 等)
6. 理解 纯静态 / 伪静态 / 前端渲染页面 的抓取方法,正则 / XPath / CSS Selector 等文本结构的规范化表示
加分项:
V了解或使用过 MQ,并理解其运作机理
V使用过可视化爬虫(Portia、PySpider),爬虫框架(Scrapy),通用组件(PhantomJS、Splash),消息和缓存中间件(MQ、Redis),调度引擎(RQ、Celery / Scheduler、Airflow)等
V有 Github / StackoverFlow / LinkedIn / 知乎 或其他社交网络账号的同学请提供 Profile 地址
V计算机及相关专业,本科,热爱编程,有扎实的编程功底,学习能力强,良好的代码习惯;
V对新技术有强烈的探索欲望,有良好的团队合作精神,有责任感,有较好的沟通能力。

职能类别: 高级软件工程师

公司介绍

    上海若雅软件系统有限公司,成立于2004年,作为专业的企业移动商务产品与服务提供商,是中国移动商务产品的引领者,是中国移动通信运营商的金牌合作伙伴。

    若雅软件专注于服务商业机构的移动信息化产品的规划、研发和市场拓展。已经与10多个省份的移动运营商签订战略合作协议,向其提供具有创意的移动信息化产品的解决方案,帮助运营商快速拓展集团客户、家庭和个人市场,帮助各商业机构无时不在、无处不在地管理他们的业务、服务他们的客户。
   
    若雅软件历来尊重人才,对人才的职业发展有着完善的规划。公司有着完善的员工培训体系、员工绩效管理体系、员工激励计划、员工福利计划等一系列关注员工职业发展与身心健康的保障措施。

    若雅软件以拥有高度敬业、经验丰富、富有激情和创新精神的员工为骄傲,公司将为每一位员工提供广阔的发展空间,并希望与全体员工一起缔造诚信、敬业、合作、创新的企业文化。

    公司将以更积极的态度、更雄厚的实力与我们的员工、我们的合作伙伴和我们的客户一起共创移动信息化的未来。

    为适应公司业务快速增长的需要,若雅软件现诚邀有志之士加盟。应聘者如直接将个人简历发往公司信箱,请勿以附件形式发送。

联系方式

  • 公司地址:地址:span京妆商务园区