第1章 云計算與大數(shù)據(jù)概述ppt課件

第1章云計算與大數(shù)據(jù)概述 云計算與大數(shù)據(jù)概論 目標 掌握云計算的基本原理掌握云計算的特點與優(yōu)勢掌握大數(shù)據(jù)的特點掌握云計算的分類掌握云計算和大數(shù)據(jù)的聯(lián)系 云計算概述 云計算是由分布計算 并行處理 網(wǎng)格計算發(fā)展而來 是一種新興的商業(yè)計算模型 通俗的理解是 云計算的 云 就是存在于互聯(lián)網(wǎng)上的服務器集群上的資源 它包括硬件資源和軟件資源 本地計算機只要通過互聯(lián)網(wǎng)發(fā)送一個需求信息 遠端就會有成千上萬的計算機提供所需資源 并返回結(jié)果到本地計算機 云計算的特點和優(yōu)勢 超大規(guī)模 虛擬化 高可靠性 通用性 高可擴展性 按需服務 及其廉價 是目前普遍被大眾接受的云計算的特點 云計算的主要優(yōu)勢在于由技術(shù)特征和規(guī)模效應所帶來的較高性價比 簡單來說就是 通過廉價的普通機器即可建立集群 因而能提供高性價比的計算和存儲服務 大數(shù)據(jù)概述 按國內(nèi)普遍的理解 大數(shù)據(jù)可以認為是具有數(shù)量巨大 來源多樣 生成極快 多變等特征且難以使用傳統(tǒng)數(shù)據(jù)體系有效處理的包含大量數(shù)據(jù)集的數(shù)據(jù) 大數(shù)據(jù)技術(shù)包括數(shù)據(jù)采集 預處理 存儲 分析挖掘與可視化等 大數(shù)據(jù)應用則是對特定的大數(shù)據(jù)集和集成應用大數(shù)據(jù)系列技術(shù)與方法 以獲得有價值信息的過程 大數(shù)據(jù)的特點與作用 大數(shù)據(jù)的特征主要包括 數(shù)據(jù)量大 種類和來源多樣化 數(shù)據(jù)價值密度相對較低 數(shù)據(jù)增長速度和處理速度快 真實性 大數(shù)據(jù)的作用包括 帶來社會和經(jīng)濟管理新方法 促進行業(yè)融合發(fā)展 推動產(chǎn)業(yè)轉(zhuǎn)型升級 改變科學研究的方法論 國外云計算發(fā)展現(xiàn)狀 國外云計算發(fā)展現(xiàn)狀 總體來看 當前全球云計算市場的發(fā)展態(tài)勢如下 美國在云計算市場的領導地位進一步鞏固 歐洲與日本是云計算市場的重要組成部分 以中國 印度 巴西等為代表的新興國家云計算市場高速增長 金磚國家巴西 俄羅斯 南非云計算市場占有率總和僅3 左右 但增速較快 且市場潛力較大 預計未來幾年市場會進一步擴大 我國云計算發(fā)展現(xiàn)狀 2012到2015年 我國云計算市場從482億元上升至1315 8億元 保持了高速增長態(tài)勢 年均復合增長率高達61 5 我國云計算發(fā)展現(xiàn)狀 云計算產(chǎn)業(yè)在中國的起步稍晚 但發(fā)展迅猛 目前 中國IT業(yè)界涉足該行業(yè)的具體情況如下 一是部分地方政府投入資源搭建平臺 積極推進云計算發(fā)展 二是本土IT企業(yè)和高校先后啟動云計算項目 加速云計算研發(fā)和應用端建設 國外大數(shù)據(jù)發(fā)展現(xiàn)狀 歐美等國家對大數(shù)據(jù)的探索和發(fā)展已走在世界前列 各國政府都已將大數(shù)據(jù)發(fā)展提升至戰(zhàn)略高度 大力推進大數(shù)據(jù)產(chǎn)業(yè)的發(fā)展 美國政府提出 大數(shù)據(jù)研究和發(fā)展倡議 發(fā)起全球開放政府數(shù)據(jù)運動 英國政府也將大數(shù)據(jù)作為重點發(fā)展的科技領域 在發(fā)展8類高新技術(shù)的6億英鎊投資中 大數(shù)據(jù)的注資占三成 我國大數(shù)據(jù)發(fā)展現(xiàn)狀 在國家層面 科技部 十二五 計劃部署了關于物聯(lián)網(wǎng) 云計算發(fā)展的專項戰(zhàn)略 2012年3月 科技部發(fā)布 十二五 國家科技計劃信息技術(shù)領域2013年度備選項目征集指南 其中 先進計算 板塊明確提出 要發(fā)展 面向大數(shù)據(jù)的先進存儲結(jié)構(gòu)及關鍵技術(shù) 國家 973計劃 863計劃 國家自然科學基金等也分別設立了針對大數(shù)據(jù)的研究計劃和專項 在學術(shù)研究層面 國內(nèi)許多高等院校和研究所成立了大數(shù)據(jù)的研究機構(gòu) 與大數(shù)據(jù)相關的學術(shù)活動也紛紛開展 在產(chǎn)業(yè)層面 國內(nèi)不少知名企業(yè)或組織也成立了大數(shù)據(jù)產(chǎn)品團隊和實驗室 力爭在大數(shù)據(jù)產(chǎn)業(yè)競爭中占據(jù)領先地位 私有云 公有云和混合云 公有云是由第三方 供應商 提供的云服務 由云提供商完全承載和管理 可通過Internet使用 成本比較低廉 私有云是在企業(yè)內(nèi)提供的云服務 這些云在公司防火墻之內(nèi) 由企業(yè)管理 混合云是公有云和私有云的混合 這些云一般由企業(yè)創(chuàng)建 而管理職責由企業(yè)和公有云提供商共同承擔 IaaS PaaS SaaS DaaS 按服務類型 可以將云計算分為基礎設施即服務 平臺即服務 軟件即服務 數(shù)據(jù)即服務四種類型 1 IaaS Infrastructure as a Service 基礎設施即服務IaaS即是把廠商的由多臺服務器組成的 云端 基礎設施作為計量服務提供給用戶的模式 IaaS的優(yōu)點是用戶只需采購較低成本的硬件 就能按需租用較高的計算能力和存儲能力 大大降低了用戶的硬件開銷 2 PaaS Platform as a Service 平臺即服務PaaS是指將軟件研發(fā)的平臺作為服務提供的模式 是將應用程序的基礎結(jié)構(gòu)視為服務 主要目的是支持應用程序運行 3 SaaS Software as a Service 軟件即服務使用SaaS模式的服務提供商將應用軟件統(tǒng)一部署在自己的服務器上 用戶根據(jù)需求 通過互聯(lián)網(wǎng)向廠商訂購應用軟件服務 服務提供商通過瀏覽器向客戶提供軟件 并根據(jù)用戶所定軟件的數(shù)量以及時間的長短等因素收費 4 DaaS Data as a Service 數(shù)據(jù)即服務DaaS就是把大數(shù)據(jù)中潛在的價值發(fā)掘出來 并根據(jù)用戶需求提供服務的模式 DaaS可以提供公共數(shù)據(jù)的訪問服務 讓用戶可以隨時訪問任意內(nèi)容的數(shù)據(jù) 還可以提供數(shù)據(jù)中潛在的價值信息 根據(jù)數(shù)據(jù)的價值 對用戶的行為進行分析 云計算與大數(shù)據(jù)的聯(lián)系 從技術(shù)上看 大數(shù)據(jù)根植于云計算 云計算關鍵技術(shù)中的海量數(shù)據(jù)存儲和管理技術(shù)以及MapReduce并行編程模型都是大數(shù)據(jù)技術(shù)的基礎 除此之外 云計算技術(shù)還包含了虛擬化技術(shù)和云平臺管理等技術(shù) 從整體上看 大數(shù)據(jù)與云計算是相輔相成的 大數(shù)據(jù)利用云計算的強大計算能力 可以更加迅速地處理海量數(shù)據(jù)的豐富信息 為用戶提供更加方便的服務 而通過大數(shù)據(jù)的業(yè)務需求 也能為云計算的落地找到更多更好的實際應用 小結(jié) 云計算是一種全新的技術(shù)和商業(yè)模式 它可以通過建立網(wǎng)絡服務器集群 向各種不同類型的用戶提供軟件在線使用 硬件租借 數(shù)據(jù)存儲 計算分析等不同類型的服務 為云服務的用戶降低IT成本 以所有權(quán)為劃分標準 可將云計算分為公有云 私有云和混合云三種類型 以服務類型為劃分標準 可將云計算分為基礎設施即服務 IaaS 平臺即服務 PaaS 軟件即服務 SaaS 數(shù)據(jù)即服務 DaaS 四種類型 大數(shù)據(jù)具有數(shù)量巨大 來源多樣 生成極快且多變 數(shù)據(jù)真實有效等特征 并且難以用傳統(tǒng)數(shù)據(jù)體系結(jié)構(gòu)和方法進行有效處理 大數(shù)據(jù)技術(shù)是挖掘和展現(xiàn)大數(shù)據(jù)中所蘊含價值的一系列技術(shù)與方法 包括數(shù)據(jù)采集 數(shù)據(jù)預處理 數(shù)據(jù)存儲 數(shù)據(jù)分析挖掘 數(shù)據(jù)可視化等 大數(shù)據(jù)技