云計算與大數(shù)據(jù)處理技術(shù)培訓(北京,12月20-22日)
【舉辦單位】北京曼頓培訓網(wǎng) www.mdpxb.com 中國培訓資訊網(wǎng) www.e71edu.com
【咨詢電話】4006820825 010-56133998 13810210257
【培訓日期】2018年12月20-22日
【培訓地點】北京
【培訓對象】
1,系統(tǒng)架構(gòu)師、系統(tǒng)分析師、高級程序員、資深開發(fā)人員。
2,牽涉到海量數(shù)據(jù)處理的機構(gòu)數(shù)據(jù)中心運行、規(guī)劃、設(shè)計負責人。
3,云服務(wù)運營服務(wù)提供商規(guī)劃負責人。
4,高校、科研院所牽涉到大數(shù)據(jù)與分布式數(shù)據(jù)處理的項目負責人
【課程背景】
云計算提供了一種對資源“按需索取服務(wù)”的能力,確保了使用時間與需要時間的完全一致,從而建立了一種分布式、高效率、低成本的IT商業(yè)模式。正是這些特點,使云計算成為IT發(fā)展的潮流與趨勢。為解決廣大系統(tǒng)設(shè)計人員深入研究與開發(fā)云計算系統(tǒng)的需要,培訓中心特舉辦“云計算與大數(shù)據(jù)處理技術(shù)”培訓班
【學員基礎(chǔ)】
1,對IT系統(tǒng)設(shè)計有一定的理論與實踐經(jīng)驗。
2,數(shù)據(jù)倉庫與大數(shù)據(jù)處理有一定的基礎(chǔ)知識。
【培訓目標】
1,深入理解通過云計算實現(xiàn)海量數(shù)據(jù)處理的思想、方法與實踐。
2,理解安全性和可用性設(shè)計的問題、方法與實踐。
3,掌握把傳統(tǒng)數(shù)據(jù)中心改造成云計算中心的技術(shù)與方法。
4,掌握虛擬化技術(shù)的核心技術(shù)方法以及應(yīng)用特征。
【培訓要點】
今天,隨著IT規(guī)模越來越大,數(shù)據(jù)規(guī)模呈幾何級數(shù)增長,已經(jīng)超出了傳統(tǒng)技術(shù)方法所能解決的范疇。為此,人們把目光轉(zhuǎn)向了剛剛興起的云計算,希望通過云計算來實施海量數(shù)據(jù)處理解決方案,實現(xiàn)以更小的成本來處理更大規(guī)模數(shù)據(jù)的目標,并成為目前云計算應(yīng)用所面對的極大挑戰(zhàn)。本課程基本思想如下:
1,目前,“云計算”已經(jīng)不是一個剛剛流行的時髦概念了,在一些傳統(tǒng)IT方法顯得無能為力的場合,云計算正在開始大展拳腳,表現(xiàn)了強大的解決問題的能力,海量數(shù)據(jù)存儲與處理正是屬于這種場合。我們?nèi)绾卧谠朴嬎惴植际江h(huán)境下正確設(shè)計大數(shù)據(jù)量數(shù)據(jù)模型?如何在設(shè)計中解決資源、效率、安全性、可靠性等一系列極難平衡的問題?如何通過云計算幫助我們解決在傳統(tǒng)IT技術(shù)中看似解決不了的敏感問題?這些都是我們在云計算架構(gòu)設(shè)計中需要深入研究的鍵問題。
2,理解問題最好的方法是分析成功案例,本課程分別從多個角度分析在面對海量數(shù)據(jù)處理的困難時,不同的應(yīng)用體系是如何解決問題并獲得成功的。研究這些已有的體系不是目的,而是希望學員能夠通過學習這些解決問題的方法和思路,通過歸納整理深入理解,再根據(jù)自己所面對的領(lǐng)域特征,形成解決具體實際問題的方案。這也是讓云計算在海量數(shù)據(jù)處理領(lǐng)域真正發(fā)揮作用的有效途徑。
3,云計算是一種服務(wù),在云計算應(yīng)用架構(gòu)設(shè)計中,就必須考慮作為服務(wù)與普通的產(chǎn)品設(shè)計有哪些不同?需要考慮的產(chǎn)品的服務(wù)特征有哪些?如何搭建面向不同層次、合適的服務(wù)平臺?在這個過程中,我們需要考慮哪些問題?有哪些成功的案例?有些什么解決方案?
4,云計算應(yīng)用最重要的問題是安全問題。安全不是一個后期需要解決的獨立問題,而是在前期就需要投入巨大精力來考慮的產(chǎn)品策略?梢哉f,安全性與可用性是云計算能否順利實施與應(yīng)用的關(guān)鍵點,也是云計算架構(gòu)設(shè)計的關(guān)鍵因素。我們應(yīng)該如何考慮安全問題?如何解決諸如數(shù)據(jù)安全、網(wǎng)絡(luò)安全、主機安全、數(shù)據(jù)管理以及災(zāi)難恢復等一系列問題?如何制定合適的安全性與可用性策略?在實踐中有什么經(jīng)驗和教訓?
5,為了把傳統(tǒng)數(shù)據(jù)中心改造為基于云計算的服務(wù)系統(tǒng),虛擬化是一個重要手段。我們必須深入研究虛擬化技術(shù)是如何實現(xiàn)的。虛擬化技術(shù)有哪幾個層面的問題?如何正確應(yīng)用虛擬化技術(shù)來實現(xiàn)把基礎(chǔ)設(shè)施向服務(wù)轉(zhuǎn)型?各種虛擬化技術(shù)有些什么優(yōu)點?有哪些陷阱?如何規(guī)劃技術(shù)解決方案?如何正確進行云計算體系結(jié)構(gòu)設(shè)計?
本課程不是一個泛泛的理論性、概念性的介紹課程,而是針對問題討論解決方案的深入課程。教師對于上述領(lǐng)域有深入的理論研究與實踐經(jīng)驗,在課程中將會針對這些問題與學員一起進行研究,在關(guān)鍵點上還會搭建實驗環(huán)境進行實踐研究,以加深對于這些解決方案的理解。通過本課程學習,希望推動國內(nèi)云計算項目開發(fā)上升到一個新水平。
【課程大綱】
第一講 云計算的概念與現(xiàn)狀
1)云計算的概念
2)云計算發(fā)展現(xiàn)狀
3)云計算實現(xiàn)機制
4)云計算的發(fā)展環(huán)境
5)云計算的優(yōu)勢
第二講 從Google云計算體系,理解海量數(shù)據(jù)處理的方法
1)如何構(gòu)建海量存儲文件系統(tǒng)?
■GFS系統(tǒng)架構(gòu)
■GFS容錯機制
■GFS系統(tǒng)管理技術(shù)
■MapReduce產(chǎn)生背景
■MapReduce編程模型
■MapReduce實現(xiàn)機制
■MapReduce案例分析
2)如何提供鎖服務(wù)解決分布式數(shù)據(jù)一致性問題?
■Chubby的設(shè)計思路
■Chubby中的Paxos算法
■Chubby文件系統(tǒng)
3)如何建立規(guī)模龐大的高性能表結(jié)構(gòu)?
■BigTable設(shè)計目標
■BigTable系統(tǒng)架構(gòu)
■BigTable服務(wù)器
■BigTable性能優(yōu)化
4)如何建立高可用性和高可擴展性的數(shù)據(jù)系統(tǒng)?
■Megastore設(shè)計目標
■Megastore數(shù)據(jù)模型
■Megastore事務(wù)及并發(fā)控制
■Megastore基本架構(gòu)
■Dapper監(jiān)控系統(tǒng)
■Dapper關(guān)鍵性技術(shù)
■Dapper工具
第三講 從Hadoop云計算項目,進一步研究云數(shù)據(jù)處理方法
1)HDFS:高可靠性處理機制及應(yīng)用
■Hadoop項目簡介
■HDFS體系結(jié)構(gòu)
■HDFS關(guān)鍵運行機制
■Hadoop vs Google
■Hadoop API
■Hadoop環(huán)境搭建
2)HBASE:龐大、極其稀疏的可擴展性數(shù)據(jù)模型
■Hbase簡介
■HBase的運行機制
■HBase與 HDFS
■HBase的對外接口
■ZooKeeper的數(shù)據(jù)模型
■ZooKeeper的讀寫機制
■ZooKeeper的使用方法
第四講 從Windows Azure,理解平臺即服務(wù)的本質(zhì)
1)微軟云計算平臺
2)微軟云操作系統(tǒng)Windows Azure
3)微軟云關(guān)系數(shù)據(jù)庫SQL Azure
4)Azure AppFabric
5)Azure Marketplace
第五講 從Amazon云計算,討論如何提供云服務(wù)
1)Dynamo基礎(chǔ)存儲架構(gòu)
2)彈性計算云EC2
3)簡單存儲服務(wù)S3
4)簡單隊列服務(wù)SQS
5)簡單數(shù)據(jù)庫服務(wù)Simple DB
6)關(guān)系數(shù)據(jù)庫服務(wù)RDS
7)內(nèi)容推送服務(wù)CloudFront
第六講 實施云計算的關(guān)鍵點:安全策略
1)云計算安全是一個必須前期重視的策略
2)云計算的特征與安全挑戰(zhàn)
3)云計算的安全體系與關(guān)鍵技術(shù)
4)基礎(chǔ)架構(gòu)云安全框架
5)云計算安全平臺
第七講 當前數(shù)據(jù)中心如何向云計算環(huán)境轉(zhuǎn)變?
1)VMware云產(chǎn)品
2)云管理平臺 vCenter
3)vCloud Service Director
4)VMware的網(wǎng)絡(luò)和存儲虛擬化
5)主流商業(yè)云計算解決方案比較
6)主流開源云計算系統(tǒng)比較
7)國內(nèi)代表性云計算平臺比較
第八講 基礎(chǔ)設(shè)施即服務(wù)(IaaS)關(guān)鍵實現(xiàn)技術(shù)
1)IaaS技術(shù)體系概述
2)服務(wù)器虛擬化技術(shù)
■CPU虛擬化
■內(nèi)存虛擬化
■I/O虛擬化
3)存儲虛擬化技術(shù)
■存儲系統(tǒng)概述
■存儲設(shè)備層的存儲虛擬化
■塊聚合層的存儲虛擬化
■文件/記錄層的存儲虛擬化
4)主機網(wǎng)絡(luò)虛擬化
第九講 軟件即服務(wù)(SaaS)關(guān)鍵實現(xiàn)技術(shù)
1)SaaS技術(shù)概述
2)呈現(xiàn)層技術(shù)綜述
3)調(diào)度層技術(shù)
■基于DNS的調(diào)度
■基于虛擬IP的調(diào)度
■基于鏈路聚合的調(diào)度
■基于應(yīng)用的調(diào)度
■調(diào)度策略
4)業(yè)務(wù)層
5)數(shù)據(jù)層
6)用戶管理和配置管理
7)用戶體驗的設(shè)計
8)課程總結(jié)
【講師介紹】
楊老師,曼頓培訓網(wǎng)(www.mdpxb.com)資深講師。主要研究網(wǎng)絡(luò)信息分析以及云計算相關(guān)技術(shù),長期從事通信網(wǎng)管系統(tǒng)、網(wǎng)絡(luò)信息處理、商務(wù)智能(BI)以及電信決策支持系統(tǒng)的研究開發(fā)工作,主持和參與了多個國家和省部級基金項目,具有豐富的工程實踐及軟件研發(fā)經(jīng)驗。
饒老師,曼頓培訓網(wǎng)(www.mdpxb.com)資深講師。國內(nèi)知名企業(yè)云平臺技術(shù)負責人,中國云親身實踐者。
【費用及報名】
1、費用:培訓費5800元(含培訓費、講義費);如需食宿,會務(wù)組可統(tǒng)一安排,費用自理。
2、報名咨詢:4006820825 010-56133998 56028090 13810210257 鮑老師
3、報名流程:電話登記-->填寫報名表-->發(fā)出培訓確認函
4、備注:如課程已過期,請訪問我們的網(wǎng)站,查詢最新課程
5、詳細資料請訪問北京曼頓培訓網(wǎng):www.mdpxb.com (每月在全國開設(shè)四百多門公開課,歡迎報名學習)