大数据基础走进大数据第十章大数据与云计算.ppt

第十章 云计算与大数据,第三篇 数据技术浅析，运用大数据,10.1 什么是云计算,云的形成,资源池二次虚拟用户自主管理连接网络,10.1 什么是云计算,云的建立过程和结构，只是一种比较普通和容易理解的形式。由于技术的不同、实现方式的不同，各家云的实现方式和结构会有很大的不同。,共同的核心要点,一定要有资源池按需分配、自助服务灵活的资源变化一定要有记账系统,在组建云的技术上，说到底，就是用软件产品（如前面提到的C和D，并通过监控程序）来管理、组织和分配经过抽象或虚拟的硬件计算资源。除了个别企业用自己的技术建设和服务外，现在常见的云技术提供者主要有：VMware、微软、Citrix和OpenStack等。,10.1 什么是云计算,按照服务的对象和范围，云可以分为三类,私有云：建一个云，如果只是为了单位（企业或机构）自己使用，就是私有云。就前面提到的“机房”而言，每个“机房”只是为本单位的不同部门或不同用途而设立的。公众云：如果云的服务对象是社会上的客户，就是公众云。前面提到的“机房”可以是任何社会上的企业、单位或个人。Amazon公司的AWS是现在世界上最大的公众云。其他公众云提供商还有Google、Salesforce、苹果的iCloud等。混合云：如果一个云，既是为单位自己使用，也对外开放资源服务，就是混合云。有时，两个或多个私有云的联合，也叫混合云。,10.1 什么是云计算,按照服务的模式，云又分为如下4类,基础设施即服务（IaaS）：作为一个用户，如果得到了前面的“机房”，就拥有了信息系统的基础设施，可以安装多个服务器并配置自己的网络。由于这个基础设施完全是云所提供的服务，所以叫“基础设施即服务”。平台即服务（PaaS）：用户不一定需要“机房”里的所有服务，比如只需要“机房”里的一个服务器作为公司软件开发的平台，那么，得到的这个平台也是以服务的形式出现的。软件即服务（SaaS）：用户不需要管理一整个服务器，也不必关心服务器是怎么工作的，只需要掌握一种软件的功能。比如，只想管理公司的客户信息（CRM），就从云商那里得到完备的CRM软件功能。所以，软件也是服务。其他（XaaS）：很多人使用iCloud，实际上就用iTunes在“机房”里开了一个用户帐号，这个账号给你提供5GB的免费存储空间，如果还需要更大一点，你就需要输入信用卡号了。这是“存储即服务”。你还可以把PC机放在云上（当然，你需要有一个小盒子能连到云上，这个小盒子还能连接显示器、键盘、鼠标等），这就是“桌面即服务”。“桌面即服务”有另外一个时髦的叫法，即“云桌面”。总之，都是XaaS，你可以试着把X换成任何东西。,10.1 什么是云计算,云计算是一种按使用量付费的模式，这种模式提供可用的、便捷的、按需的网络访问，进入可配置的计算资源共享池（资源包括网络、服务器、存储、应用软件、服务），这些资源能够被快速提供，只需投入很少的管理工作或与服务供应商进行很少的交互。,美国国家标准与技术研究院（NIST）定义,百度云阿里云亚马逊AWS云服务微软Azure云计算,10.1 什么是云计算,10.2 云计算与大数据的关系,云计算是硬件资源的虚拟化，而大数据是海量数据的高效处理,大数据的总体架构包括三层：数据存储，数据处理和数据分析。数据先要通过存储层存储下来，然后根据数据需求和目标来建立相应的数据模型和数据分析指标体系对数据进行分析产生价值。而中间的时效性又通过中间数据处理层提供的强大的并行计算和分布式计算能力来完成。三者相互配合，这让大数据产生最终价值。云计算发展的趋势是：云计算作为计算资源的底层，支撑着上层的大数据处理，而大数据的发展趋势是，实时交互式的查询效率和分析能力，“动一下鼠标就可以在妙极操作PB级别的数据”，确实让人十分期待。,10.3 基于云计算和大数据的现代农业平台,针对目前智能农业监控平台建设中的问题，结合农业部等制定的农业信息化发展规划、各地智慧城市建设的推动和当地农业主管部门农业信息化建设的实践，分析智能农业监控平台的各类用户主体需求，结合物联网及云计算技术，提出了基于云计算的智能农业监控平台建设架构，系统架构包括感知层、传输层、数据层、应用层、终端层。,10.3 基于云计算和大数据的现代农业平台,农产品追溯体系的建设最主要的就是“一个中心和三大模块”，就是一个追溯云端数据中心，和生产者、监管部门和消费者三大模块。结合大数据、云计算以及物联网技术搭建一个云数据处理中心，把生产者、监管部门以及消费者连接起来。,10.3 基于云计算和大数据的现代农业平台,