摘要:云計(jì)算是以數(shù)據(jù)為中心的一種數(shù)據(jù)密集型的超級(jí)計(jì)算。云計(jì)算的數(shù)據(jù)存儲(chǔ)系統(tǒng)主要有和開(kāi)發(fā)團(tuán)隊(duì)的開(kāi)源系統(tǒng)。云計(jì)算采用編程模式,將任務(wù)自動(dòng)分成多個(gè)子任務(wù),通過(guò)和兩部實(shí)現(xiàn)任務(wù)在大規(guī)模計(jì)算節(jié)點(diǎn)中的調(diào)度與分配。
云計(jì)算是以數(shù)據(jù)為中心的一種數(shù)據(jù)密集型的超級(jí)計(jì)算。在數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)管理、編程模式、并發(fā)控制、系統(tǒng)管理等方面具有自身獨(dú)特的技術(shù)。
海量分布式存儲(chǔ)技術(shù)
為保證高可用、高可靠和經(jīng)濟(jì)性,云計(jì)算采用分布式存儲(chǔ)的方式來(lái)存儲(chǔ)數(shù)據(jù)和冗余存儲(chǔ)的方式來(lái)保證存儲(chǔ)數(shù)據(jù)的可靠性,從而提供廉價(jià)可靠的系統(tǒng)。為了滿足大量用戶的需求,數(shù)據(jù)存儲(chǔ)技術(shù)必須具有高吞吐率和高傳輸率的特點(diǎn)。
云計(jì)算的數(shù)據(jù)存儲(chǔ)系統(tǒng)主要有Google GFS(Google File System)和Hadoop開(kāi)發(fā)團(tuán)隊(duì)的開(kāi)源系統(tǒng)HDFS(Hadop Distributed File System)。大部分IT廠商,包括Yahoo、Intel的“云”計(jì)劃采用的都是HDFS的數(shù)據(jù)存儲(chǔ)技術(shù)。
并行編程模式
為了高效地利用云計(jì)算的資源,使用戶能更輕松地享受云計(jì)算帶來(lái)的服務(wù),云計(jì)算的變成哦是必須保證后臺(tái)復(fù)雜的并行執(zhí)行和任務(wù)調(diào)度向用戶和編程人員透明。云計(jì)算采用MapReduce編程模式,將任務(wù)自動(dòng)分成多個(gè)子任務(wù),通過(guò)Map和Reduce兩部實(shí)現(xiàn)任務(wù)在大規(guī)模計(jì)算節(jié)點(diǎn)中的調(diào)度與分配。
數(shù)據(jù)管理技術(shù)
云計(jì)算系統(tǒng)對(duì)大數(shù)據(jù)集進(jìn)行處理、分析,向用戶提供高效的服務(wù)。因此,數(shù)據(jù)管理技術(shù)必須能夠高效地管理大數(shù)據(jù)集。其次,如何在規(guī)模巨大的數(shù)據(jù)中找到特定的數(shù)據(jù),也是云計(jì)算數(shù)據(jù)管理技術(shù)所必須解決的問(wèn)題。云系統(tǒng)的數(shù)據(jù)管理往往采用列存儲(chǔ)的數(shù)據(jù)管理模式,保證海量數(shù)據(jù)存儲(chǔ)和分析性能。云計(jì)算的數(shù)據(jù)管理技術(shù)最著名的是Googe的BigTable數(shù)據(jù)管理技術(shù),同事Hadop開(kāi)發(fā)團(tuán)隊(duì)開(kāi)發(fā)了累死BigTable的開(kāi)源數(shù)據(jù)管理模塊HBase。
分布式資源管理技術(shù)
在多節(jié)點(diǎn)并發(fā)執(zhí)行環(huán)境,分布式資源管理系統(tǒng)是保證系統(tǒng)狀態(tài)正確性的關(guān)鍵技術(shù)。系統(tǒng)狀態(tài)需要在多節(jié)點(diǎn)之間同步,關(guān)鍵節(jié)點(diǎn)出現(xiàn)故障時(shí)需要遷移服務(wù),分布式資源管理技術(shù)通過(guò)鎖機(jī)制協(xié)調(diào)多任務(wù)對(duì)于資源的使用,從而保證數(shù)據(jù)操作的一致性。Google的Ghubby是最錐你給的分布式資源管理系統(tǒng)。
云計(jì)算平臺(tái)管理技術(shù)
云計(jì)算資源規(guī)模龐大,一個(gè)系統(tǒng)的服務(wù)器數(shù)量可能會(huì)高達(dá)十萬(wàn)臺(tái)并跨越幾個(gè)坐落于不同物理地點(diǎn)的數(shù)據(jù)中心,同時(shí)還運(yùn)行成百上千種應(yīng)用。如何有效地管理這些服務(wù)器,保證這些服務(wù)器組成的系統(tǒng)能提供7*24小時(shí)不間斷服務(wù)是一個(gè)巨大的挑戰(zhàn)。云計(jì)算系統(tǒng)管理技術(shù)是云計(jì)算的“神經(jīng)網(wǎng)絡(luò)”,通過(guò)這些技術(shù)能夠是大量的服務(wù)器協(xié)同工作,方便地進(jìn)行業(yè)務(wù)部署和開(kāi)通,快速發(fā)現(xiàn)和恢復(fù)系統(tǒng)故障,通過(guò)自動(dòng)化、智能化的手段實(shí)現(xiàn)大會(huì)磨系統(tǒng)的可運(yùn)營(yíng)、可管理。Google通過(guò)其卓越的云計(jì)算管理系統(tǒng)維持著全球上百萬(wàn)臺(tái)PC服務(wù)器協(xié)同、高效地運(yùn)行,起云計(jì)算系統(tǒng)管理技術(shù)也被作為企業(yè)核心機(jī)密,至今沒(méi)有公布任何技術(shù)資料。
綠色節(jié)能技術(shù)
云計(jì)算技術(shù)降低了服務(wù)器的采購(gòu)成本,從而使電源消耗所帶來(lái)的運(yùn)營(yíng)成本成為云計(jì)算計(jì)算中心的主要開(kāi)支之一,為了進(jìn)一步降低成本,云計(jì)算的先去在綠色節(jié)能技術(shù)上進(jìn)行了大量探索。
傳統(tǒng)數(shù)據(jù)中心空調(diào)冷卻的費(fèi)用約占整體電費(fèi)的30%—70%,Google為了節(jié)省能源,在比利時(shí)的數(shù)據(jù)中心降溫系統(tǒng)無(wú)需冷卻劑,而是采取額室外空氣進(jìn)行自然冷卻。根據(jù)比利時(shí)的氣候條件,每年只有7天左右無(wú)法使用自由冷卻方式。在比較炎熱的夏天,Google可以通過(guò)云計(jì)算管理系統(tǒng)將該數(shù)據(jù)中心的計(jì)算任務(wù)轉(zhuǎn)移到其他數(shù)據(jù)中心中。
文章版權(quán)歸作者所有,未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請(qǐng)注明本文地址:http://www.hztianpu.com/yun/5117.html
摘要:高利用率一體化低功耗自動(dòng)化管理成為云計(jì)算數(shù)據(jù)中心建設(shè)的關(guān)注點(diǎn),整合綠色節(jié)能成為云計(jì)算數(shù)據(jù)中心構(gòu)建技術(shù)的發(fā)展特點(diǎn)。隱私權(quán)保護(hù)問(wèn)題雖是云計(jì)算普及過(guò)程中需要解決的一大難題,但隨著云計(jì)算的發(fā)展及相關(guān)標(biāo)準(zhǔn)的成熟。 1、數(shù)據(jù)中心向整合化和綠色節(jié)能方向發(fā)展目前傳統(tǒng)數(shù)據(jù)中心的建設(shè)正面臨異構(gòu)網(wǎng)絡(luò)、靜態(tài)資源、管理復(fù)雜、能耗高等方面問(wèn)題,云計(jì)算數(shù)據(jù)中心與傳統(tǒng)數(shù)據(jù)中心有所不同,它既要解決如何在短時(shí)間內(nèi)快速、高效完成...
摘要:虛擬和云計(jì)算的復(fù)雜情況當(dāng)需要管理同一網(wǎng)絡(luò)上的大量機(jī)器時(shí),基于虛擬和或云計(jì)算的數(shù)據(jù)中心就會(huì)遇到挑戰(zhàn)。當(dāng)數(shù)據(jù)中心由本地部署虛擬環(huán)境和或云計(jì)算環(huán)境的異構(gòu)組合組成時(shí),會(huì)出現(xiàn)更多復(fù)雜情況。當(dāng)今的數(shù)據(jù)中心管理人員經(jīng)常監(jiān)督日益復(fù)雜的運(yùn)營(yíng)環(huán)境,其中包含各種應(yīng)用程序、數(shù)據(jù)庫(kù)和競(jìng)爭(zhēng)平臺(tái)的混合。通過(guò)腳本和平臺(tái),以及特定于應(yīng)用程序的調(diào)度工具來(lái)管理數(shù)據(jù)中心環(huán)境,這有可能效率低下,并且耗時(shí),從而導(dǎo)致數(shù)據(jù)中心自動(dòng)化孤島,...
摘要:而受益于烏蘭察布的成本優(yōu)勢(shì),讓這款服務(wù)器以更親民的方式走近市場(chǎng)。在現(xiàn)金激勵(lì)的基礎(chǔ)上,追加年免費(fèi)體驗(yàn)快杰云服務(wù)器大禮包,深化與大使的緊密合作。 企業(yè)數(shù)字化轉(zhuǎn)型,離不開(kāi)云平臺(tái)搭建。助力企業(yè)上云、加速傳統(tǒng)企業(yè)數(shù)字化轉(zhuǎn)型,UCloud在雙11啟動(dòng)了一輪大規(guī)模補(bǔ)貼:性能卓越的快杰云服務(wù)器、性能安全兼具的裸金屬,企業(yè)數(shù)字化轉(zhuǎn)型利器混合云,以及音視頻核心產(chǎn)品CDN……多款重磅云計(jì)算產(chǎn)品亮相UCloud雙...
摘要:本篇白皮書(shū)的目標(biāo)是描述企業(yè)云計(jì)算中存儲(chǔ)必備的個(gè)要素。雖然,云存儲(chǔ)服務(wù)提供商在考慮成本的同時(shí)繼續(xù)增加可用性,但是目前市場(chǎng)上的服務(wù)級(jí)別協(xié)議不能滿足企業(yè)關(guān)鍵應(yīng)用的需求。內(nèi)部企業(yè)方案和企業(yè)云存儲(chǔ)的主要差別在于,主數(shù)據(jù)保護(hù)在方案中是如何綁定的。在最近對(duì)云計(jì)算的所有關(guān)注中,存儲(chǔ)更多地被視為基礎(chǔ)平臺(tái)。時(shí)至今日,許多云計(jì)算提供的僅僅局限于CPU內(nèi)核的集合,定量的內(nèi)存分配,低轉(zhuǎn)速存儲(chǔ),或者還有一些面向互聯(lián)網(wǎng)的...
摘要:六大加速器推進(jìn)增長(zhǎng)與美國(guó)等成熟市場(chǎng)相比,國(guó)內(nèi)云計(jì)算市場(chǎng)在年增速已經(jīng)高于全球平均水平,但是由于起步較晚,累計(jì)體量仍處于比較初級(jí)的階段。目前,國(guó)內(nèi)公有云的市場(chǎng)規(guī)模僅相當(dāng)于美國(guó)年整體市場(chǎng)規(guī)模的左右?! “殡S著寬帶市場(chǎng)引入民資、三大運(yùn)營(yíng)商換帥、提速降費(fèi)、流量不清零、電信聯(lián)通網(wǎng)絡(luò)終端共建共享等重大事件,通信業(yè)2015年悄然走過(guò),2016年產(chǎn)業(yè)大幕已經(jīng)拉開(kāi)?! ≡?015年,云計(jì)算更多觸及社會(huì)的各個(gè)方面...
閱讀 2471·2021-11-08 13:13
閱讀 1407·2021-10-09 09:41
閱讀 1881·2021-09-02 15:40
閱讀 3349·2021-08-17 10:13
閱讀 2684·2019-08-29 16:33
閱讀 3283·2019-08-29 13:17
閱讀 3274·2019-08-29 11:00
閱讀 3474·2019-08-26 13:40