长沙招聘

岗位职责:

1、负责数据平台的数据采集与爬取、解析处理、清洗、入库及备份等数据日常工作；

2、负责分析新的数据需求, 完成数据处理的实现；

3、负责数据处理程序设计框架改善, 数据处理性能优化, 系统数据处理的能力提高；

4、 负责和数据架构师、数据挖掘、分析人员协同工作, 完成数据的统计、查询和分析。

任职标准：

1. 熟练使用java语言，熟练运用httpclient、jsuop、xpath等基础组件，熟悉js、ajax、http协议、tcp协议，熟练linux基础命令，生产环境程序出现问题，能及时定位。

2. 1年以上从事爬虫开发相关的工作经验，愿意做爬虫工作，精通多线程、设计模式、分布式等开发技术，有相关爬虫框架源代码深入研究者优先，使用过webmagic优先。

3. 掌握redis、kafka、activemq、mongodb、elasticsearch等组件使用。

4. 使用过hadoop生态圈中相关组件，如hbase、spark-streaming等优先。

5. 独立开发过某个或某些网站者优先，面试时需要详细说明其开发过程。

      湖南思利他网络科技有限公司于2017年9月1日成立。注册资本2000万元人民币。思利他的创始人、股东及投资人，均是从事建筑相关行业，在招投标、项目管理上有着非常丰富的经验。思利他通过大数据应用为建筑行业的发展带来了新的动能，促进产业的跨界融合与服务创新。产业链各方通过大数据技术进行信息共享、充分协作和资源整合，提高全行业乃至全社会范围内的资源整合与配置能力。思利他集合了一批极具研发张力的技术研发团队，追求创新的实力设计人才以及拥有多年行业经验的运营策划师。团队具备多年互联网技术开发与服务经验，有着丰富的互联网行业资源。我们始终从市场的角度和客户的需求出发，通过不断完善我们的产品及服务，帮助客户创造更大的价值。团队拥有最懂建筑行业的产品团队，团队核心成员均拥有多年的北上广深从业经验，并且同时具备建筑行业的工作经历，懂产品，懂互联网，更懂建筑业，能够为建筑企业打造更专业的数字化产品。

 
旗下产品：标大大
标大大业务覆盖移动端、PC端，数据涵盖全国，1000w+工程项目信息、300w+企业信息、430w+人员信息、300w+法务信息，随时随地查询，招标中标尽在掌握。日均新增信息量上万条，并对招标公告、中标公告进行深度解析，一目了然。平台信息均来源覆盖全国建筑市场监管公共服务平台、地方四库一平台、全国招投标监管网、地方招投标监管网、各级政府采购网，权威可靠。查在建，湖南省五万多建造师信息，是否在建，一查便知。湖南省最完善最齐全的在建查询。收集了湖南省招投标领域近百个政府官网、一键跳转。并且可以直接打开全国建筑市场监管公共服务平台、湖南建筑市场监管公共服务平台。全国三百多万家建筑企业的联系方式，让沟通更近一步。强大的搜索和筛选功能，组合查询，真正做到查无遗漏。