王选明:浪潮大数据平台建设与实践

来源:章丘大数据创客中心    时间:2017年12月15日

M00/00/17/rBYERFozmnKAdcYYAAC0R8W8368316.jpg
浪潮集团有限公司技术总监王选明发言

  浪潮集团有限公司技术总监王选明:大家上午好,我们站在IT的角度如何看待大数据呢?下面就从IT的角度讲一讲,如何能够让农业大数据快速的落地。我分享四个方面的内容,第一个是大数据平台建立的理念,第二个是平台的解决方案,第三个是如何落地,第四个是我们应用的实践。

  如何思考农业大数据?从浪潮的经验来讲,我们希望农业的大数据是从生产经营管理服务各个角度去考虑农业大数据的应用,实际上这个数据来源是多样化的,比如说涉农的互联网数据、农业部门的组织数据和大量的农业物联网产业数据,通过这个数据我们经过采集、清理和组织,进行梳理,来构造农业大数据的存储平台,通过这个平台进行分布式计算,通过云海的数据库和分布式处理环境来解决大数据的计算模式。

  从应用的角度,第一是数据分析,第二是数据推送,第三是数据洞察的潜力分析。从大数据处理的流程上来看,分三个部分,第一是从统一的数据源来讲,做一个数据融合,比如说互联网浪潮云的一个工程,有将近45个TB的数据,从这里面拿出电商数据、消费评价的数据结合物联网的数据,生物信息采集、光、水、电、空气、鱼、温度等等这些信息的采集,构造一个基于浪潮云海平台统一大数据的处理环境,通过这些平台的构建我们能够实现实时的决策、智能的数据挖掘分析。

  站在IT的角度如何看待大数据?我们的建设理念是什么?从云计算平台的理念来讲,公司是云平台+轻应用,第二个就是大数据+微服务,这是基本的建设理念。我们的愿景是:如何把部委的组织数据、物联网数据通过浪潮的数据开放平台开放给数据应用的企业,能够构造更多APP的应用,面对政府、企业和个人的应用。以前我们建的应用系统都是从各个角度独立建的应用系统,未来实际上是以数据为中心。从分布式云架构来讲,我们的IT系统大多数都是在某一台机器里面,包括系统软件、应用软件等。从云平台这个角度来讲,我们需要构建一个IaaS平台解决数据和应用自动部署的问题。从应用的角度来讲,未来的大数据应用是快速迭代的,我们通过创新的模型来构造不停的完全迭代的交付模式。在大数据时代,新兴业务对云平台有一个基本的要求,比如说能够支持分布式,支持弹性的伸缩,能够支持高并发并且非常可靠,这就是一个非常好的云计算环境的支撑,这里边云计算环境的支撑需要对我们所说的IaaS平台有非常高的要求,基本能力是需要有一个能够弹性、能够自愈,相当于有问题以后能够自己解决的整体架构。

  究竟怎么样落地呢?浪潮有一个三步法,第一步是把业务首先上云,把业务搬到云计算平台里面,而不是购买简单的服务器做应用。第二步是数据整合,做数据整合之前要做一些原数据管理,通过原数据管理平台再去做大数据的收集处理平台,收进来以后就把组织数据、互联网数据和物联网采集的数据构造成数据处理平台,这里面还有一个开放平台开发给数据平台商。第三步就是开发创新应用,包括预警预测、公共服务以及宏观的决策,这就是三步法。

  究竟到系统里面我们怎么去做呢?比如说第一我们先构建数据支撑平台。第二是构建数据平台,构建一体化的数据服务。第三个是再做支撑,业务上移。第四是做业务系统云平台的构建,这实际上是一个落地的方案。

  从产品的角度怎么解决这些问题呢?从产品的角度我们看这里边实际上分了六个部分,我们都有对应的产品的解决方案。第一是我们在如何支持信息的采集计算和存储以及可视化的洞察,这里面有一个云海的insight的平台,从数据服务这一块来讲,有云海平台,有智能的运维,能够全国范围内来进行管理。第三实际上就是基础架构,这块有一个云海大数据一体机,相当于机器在出厂之前就把所有的系统软件、网络环境和大数据支撑环境都在一台服务器里面,同时这一台服务器里面有32台服务器,这台数据拿回去以后接上电,通上网络,就可以进行大数据处理的服务。

  我们有几个应用实践,比如全国中储粮粮库的平台,它综合了全国大概有31个省以及数百万个粮库,数万个视频摄像头,数百万个粮情监测探头。从这个系统里面就能看到实时的温度、湿度以及分布的情况,大数据中心构建了一个结构,这里面同时可以做一些预测。

  我们在浪潮的平台里面也做了一个浪潮的商务大数据,就是流通大数据,实际上对一个省份、一个地区来讲,生猪是从哪来到哪去,到哪个市场里边去的这些都有一个地图。从生猪监测、市场预测、流通、溯源、企业观察都有全面的解答。

  最后是精准扶贫,这是国家现在政策要求的,我们有一个作战地图哪,些地方是贫困的,哪些地方需要我们去扶持的,再根据年龄、民族和劳动力的情况做一些精准的分析。下面就是做一些精准的调度,一直到贫困县、村的一些调度,这是准确的监控视图。我要讲的就是这么多,感谢大家。


分享一下:
数据服务
支付方式
下载与调用
发布数据需求
供应商服务
发布数据供应
供应商入驻
合作协议
问题和帮助
常见问题
发票问题
注册协议
购买协议
关于我们
网站简介
发展历程
企业新闻
联系我们

(周一至周五 9:00-17:30)

客服邮箱:lcdsjpt@inspur.com

©2018 浪潮卓数大数据产业发展有限公司版权所有

苏ICP备17067797号

苏公网安备32021102000680号

提供计算安全与服务

国家大数据流通与交易工程实验室

国家大数据双创示范基地

大数据应用国家专业化众创空间