爬虫开发工程师
四川中电启明星信息技术有限公司
- 公司规模:1000-5000人
- 公司性质:国企
- 公司行业:计算机软件
职位信息
- 发布日期:2021-01-14
- 工作地点:成都
- 招聘人数:1人
- 工作经验:3-4年经验
- 学历要求:大专
- 职位月薪:1-1.5万/月
- 职位类别:爬虫开发工程师
职位描述
岗位职责:
1、负责开发网络爬虫系统以及优化爬虫策略,进行多渠道信息的抓取和分析;
2、完成数据采集与爬取、解析处理、入库等数据日常工作;
3、积极主动思考探索爬虫在实际业务中的价值,参与设计数据有效利用策略,从数据合理性、完整性角度提供建议;
4、把握网络爬虫核心技术研究方向,研究优化算法,提升爬虫系统的稳定性、可扩展性;
5、设计爬虫策略和防屏蔽规则,提升网页抓取的效率和质量。
任职要求:
1、专科及以上学历,计算机相关专业,3年以上爬虫开发工作经验;
2、熟悉html/css/xpath/ajax/xml等技术,熟悉HTTP传输协议,精通网页抓取原理和整合技术,熟悉正则表达式;
3、精通Python,熟悉Scrapy爬虫框架,有丰富的反爬经验;
4、掌握相关的数据存储工作,熟悉mysql、Redis、MongoDB中的一种;
5、熟悉APP(必须)、web端(必须)、PC端等数据采集;
6、熟悉反爬虫机制,IP代理,处理账号限制、复杂验证码、模拟登陆等疑难问题。
公司介绍
四川中电启明星信息技术有限公司(以下简称“启明星公司”)成立于1999年,隶属于国家电网国网信通股份公司,注册资金3000万元,专注于为大中型企业及政府部门提供信息化解决方案和服务,业务横跨能源(电力、石油、核能)、制造、政府等多个行业,在成都、北京、广州、天津等多个地方设有研发和技术服务中心,本着“服务***,用户至上”的经营理念,为全国用户提供专业的信息化咨询和服务。
启明星公司有近千名信息通信专业人员,研发队伍接近300人,拥有多名行业高端人才和技术专家,启明星公司秉承“卓越科技,照亮未来”的价值理念,致力于为用户创造更多的价值,坚持创新发展,可持续发展,打造了星云(云计算虚拟化系列)、星盾(信息安全产品)、星窗(企业门户、自主桌面操作系统)、星海(用户行为分析、电子商城等)四个核心系列产品,实现多项关键突破和技术创新,取得近百个软著和软件产品登记,获得20余个发明专利受理,发表多篇核心论文,强有力的支撑着用户的信息化建设。
启明星公司已通过CMMI4、计算机二级集成、ITSS运维服务、信息系统安全集成服务、ISO9001:2008等资质,并融合公司质量管理要求,形成有启明星公司特色的1533质量管理体系,为用户提供标准化的管理过程和交付成果。
更多信息可以上国网平台(搜索四川中电启明星)上了解·
启明星公司有近千名信息通信专业人员,研发队伍接近300人,拥有多名行业高端人才和技术专家,启明星公司秉承“卓越科技,照亮未来”的价值理念,致力于为用户创造更多的价值,坚持创新发展,可持续发展,打造了星云(云计算虚拟化系列)、星盾(信息安全产品)、星窗(企业门户、自主桌面操作系统)、星海(用户行为分析、电子商城等)四个核心系列产品,实现多项关键突破和技术创新,取得近百个软著和软件产品登记,获得20余个发明专利受理,发表多篇核心论文,强有力的支撑着用户的信息化建设。
启明星公司已通过CMMI4、计算机二级集成、ITSS运维服务、信息系统安全集成服务、ISO9001:2008等资质,并融合公司质量管理要求,形成有启明星公司特色的1533质量管理体系,为用户提供标准化的管理过程和交付成果。
更多信息可以上国网平台(搜索四川中电启明星)上了解·
联系方式
- 公司地址:高新区益州大道中段1800号天府软件园G区3栋10F (邮编:610041)