PAGE6PAGE1《云計(jì)算與大數(shù)據(jù)技術(shù)》課程大綱課程編號(hào)：CPU320027E課程性質(zhì)：專(zhuān)業(yè)教育；選修課課程名稱(chēng)：云計(jì)算與大數(shù)據(jù)技術(shù)英文名稱(chēng)：IntroductiontoCloudComputingandBigDataTechnology適用專(zhuān)業(yè)：軟件工程先修課程：軟件工程I，軟件工程，計(jì)算機(jī)網(wǎng)絡(luò)、操作系統(tǒng)學(xué)分：3學(xué)時(shí)：48（32/16）大綱執(zhí)筆人：張冰峰大綱審核人：審核時(shí)間：2023年4月一、課程介紹（一）課程簡(jiǎn)介《云計(jì)算與大數(shù)據(jù)技術(shù)》課程主要介紹云計(jì)算和大數(shù)據(jù)的基本概念、云計(jì)算的服務(wù)模式和關(guān)鍵技術(shù)、云計(jì)算服務(wù)供應(yīng)商構(gòu)建公有云、私有云，可選的云計(jì)算管理工具和組件。大數(shù)據(jù)應(yīng)用平臺(tái)的搭建和部署，大數(shù)據(jù)采集清洗和轉(zhuǎn)換工具、大數(shù)據(jù)存儲(chǔ)、大數(shù)據(jù)計(jì)算引擎、企業(yè)和個(gè)人如何搭建大數(shù)據(jù)平臺(tái)完成應(yīng)用實(shí)踐。該課程主要面向軟件工程專(zhuān)業(yè)本科生的選修課程，通過(guò)本課程的學(xué)習(xí)，使學(xué)生能夠在已有的計(jì)算機(jī)基礎(chǔ)知識(shí)的基礎(chǔ)上，對(duì)云計(jì)算與大數(shù)據(jù)架構(gòu)有一個(gè)系統(tǒng)的、全面的了解，掌握架構(gòu)一個(gè)私有云所必需的基本理論、基本知識(shí)和基本技能，從而能成功架構(gòu)一個(gè)企業(yè)的私用云。能夠根據(jù)應(yīng)用需求搭建大數(shù)據(jù)技術(shù)平臺(tái)，完成大數(shù)據(jù)應(yīng)用的實(shí)踐應(yīng)用，為今后的學(xué)習(xí)和工作打下堅(jiān)實(shí)的基礎(chǔ)。（二）與相關(guān)課程的聯(lián)系與分工本課程主要預(yù)修課程為軟件工程，計(jì)算機(jī)網(wǎng)絡(luò)、操作系統(tǒng)。云計(jì)算和大數(shù)據(jù)技術(shù)是新時(shí)代和新技術(shù)的實(shí)踐應(yīng)用，能夠理解操作系統(tǒng)基本原理，安裝Linux操作系統(tǒng)和熟悉基本的操作命令。能夠搭建Hadoop和相關(guān)大數(shù)據(jù)存儲(chǔ)和處理組件，完成大數(shù)據(jù)一般應(yīng)用的實(shí)踐，可通過(guò)高級(jí)程序設(shè)計(jì)語(yǔ)言完成實(shí)際應(yīng)用項(xiàng)目開(kāi)發(fā)?！队?jì)算機(jī)網(wǎng)絡(luò)》主要介紹計(jì)算機(jī)網(wǎng)絡(luò)的基本概念、體系結(jié)構(gòu)、協(xié)議標(biāo)準(zhǔn)、網(wǎng)絡(luò)編程、互聯(lián)網(wǎng)應(yīng)用等相關(guān)知識(shí)，以及計(jì)算機(jī)網(wǎng)絡(luò)在企業(yè)和個(gè)人應(yīng)用中的應(yīng)用和實(shí)踐。通過(guò)本課程的學(xué)習(xí)，使學(xué)生能夠在已有的計(jì)算機(jī)網(wǎng)絡(luò)基礎(chǔ)知識(shí)的基礎(chǔ)上，深入理解計(jì)算機(jī)網(wǎng)絡(luò)的原理和應(yīng)用。《操作系統(tǒng)》主要介紹操作系統(tǒng)的基本概念、體系結(jié)構(gòu)、進(jìn)程線程、內(nèi)存管理、文件系統(tǒng)、設(shè)備管理等相關(guān)知識(shí)，以及操作系統(tǒng)在企業(yè)和個(gè)人應(yīng)用中的應(yīng)用和實(shí)踐。二、課程教學(xué)目標(biāo)本課程主要圍繞軟件質(zhì)量管理課程的教學(xué)目標(biāo)，培養(yǎng)學(xué)生在軟件開(kāi)發(fā)和質(zhì)量管理方面的核心能力和關(guān)鍵技能，為他們未來(lái)的職業(yè)發(fā)展打下堅(jiān)實(shí)的基礎(chǔ)。具體來(lái)說(shuō)，本課程的教學(xué)目標(biāo)為：教學(xué)目標(biāo)1:掌握云計(jì)算和大數(shù)據(jù)的基本概念、系統(tǒng)架構(gòu)、關(guān)鍵技術(shù)和資源架構(gòu)等知識(shí)。教學(xué)目標(biāo)2:掌握架構(gòu)一個(gè)私有云所必需的基本理論、基本知識(shí)和基本技能，能夠成功架構(gòu)一個(gè)企業(yè)的私用云。教學(xué)目標(biāo)3:掌握大數(shù)據(jù)基本知識(shí)，能夠根據(jù)應(yīng)用需求完成大數(shù)據(jù)平臺(tái)架構(gòu)的搭建，完成基礎(chǔ)應(yīng)用開(kāi)發(fā)。教學(xué)目標(biāo)4：培養(yǎng)學(xué)生勇于擔(dān)當(dāng)操作系統(tǒng)自主可控偉大事業(yè)重任的愛(ài)國(guó)主義精神，在實(shí)踐中培養(yǎng)學(xué)生民族自豪感和勤奮刻苦、努力拼搏和創(chuàng)新精神與工匠精神。畢業(yè)要求指標(biāo)點(diǎn)實(shí)現(xiàn)矩陣畢業(yè)要求畢業(yè)要求2級(jí)指標(biāo)點(diǎn)課程教學(xué)目標(biāo)畢業(yè)要求1：工程知識(shí)1-4．掌握操作系統(tǒng)和計(jì)算機(jī)組成相關(guān)知識(shí)，能將其用于復(fù)雜軟/硬件工程問(wèn)題的建模和求解。教學(xué)目標(biāo)1教學(xué)目標(biāo)2教學(xué)目標(biāo)3教學(xué)目標(biāo)4畢業(yè)要求4：研究4-1．能夠理解軟件學(xué)科相關(guān)的基本原理和設(shè)計(jì)思路，設(shè)計(jì)可行的實(shí)驗(yàn)及驗(yàn)證方案，能采用科學(xué)方法解決問(wèn)題；教學(xué)目標(biāo)2教學(xué)目標(biāo)3教學(xué)目標(biāo)4畢業(yè)要求5：使用現(xiàn)代工具5-2．能夠開(kāi)發(fā)恰當(dāng)?shù)募夹g(shù)和資源，并恰當(dāng)選用軟件開(kāi)發(fā)平臺(tái)及編程工具，解決智能軟件的應(yīng)用開(kāi)發(fā)問(wèn)題。教學(xué)目標(biāo)1教學(xué)目標(biāo)2教學(xué)目標(biāo)3教學(xué)目標(biāo)4三、課程教學(xué)目標(biāo)達(dá)成途徑課程教學(xué)目標(biāo)教學(xué)目標(biāo)1課堂講授：板書(shū)與多媒體相結(jié)合，重點(diǎn)突出、思路清晰、注重師生互動(dòng)交流，及時(shí)掌握學(xué)生學(xué)習(xí)情況，關(guān)注每一個(gè)學(xué)生的學(xué)習(xí)。作業(yè)：通過(guò)完成布置的課后作業(yè)，鞏固云計(jì)算和大數(shù)據(jù)的基本概念、系統(tǒng)架構(gòu)、關(guān)鍵技術(shù)和資源架構(gòu)等知識(shí)，形成基本應(yīng)用能力。實(shí)驗(yàn)教學(xué)：完成虛擬化軟件VirtualBox安裝部署，安裝CentOS操作系統(tǒng)，安裝JDK，安裝MySQL。專(zhuān)題調(diào)研：通過(guò)CSDN、知乎網(wǎng)站或APP完成相關(guān)知識(shí)的搜集和整理，重點(diǎn)掌握實(shí)驗(yàn)教學(xué)內(nèi)容，通過(guò)實(shí)踐理解理論知識(shí)。線上作業(yè)實(shí)驗(yàn)實(shí)踐實(shí)驗(yàn)報(bào)告教學(xué)目標(biāo)2課堂講授：板書(shū)與多媒體相結(jié)合，重點(diǎn)突出、思路清晰、注重師生互動(dòng)交流，及時(shí)掌握學(xué)生學(xué)習(xí)情況，關(guān)注每一個(gè)學(xué)生的學(xué)習(xí)。實(shí)驗(yàn)教學(xué)：Hadoop3.0安裝部署配置；HDFS和YARN常用指令操作?？赏瓿蒓penStack學(xué)習(xí)與環(huán)境搭建部署，理解私有云的部署。專(zhuān)題分析：通過(guò)CSDN、知乎網(wǎng)站或APP完成OpenStack的理論知識(shí)、專(zhuān)業(yè)技術(shù)的學(xué)習(xí)，能夠搭建部署并完成操作手冊(cè)或總結(jié)報(bào)告。課后作業(yè)實(shí)驗(yàn)報(bào)告課堂表現(xiàn)教學(xué)目標(biāo)3翻轉(zhuǎn)課堂：板書(shū)與多媒體相結(jié)合，幫助深入理解軟云計(jì)算和大數(shù)據(jù)的基本概念、系統(tǒng)架構(gòu)、關(guān)鍵技術(shù)和資源架構(gòu)等知識(shí)。實(shí)驗(yàn)教學(xué)：Hive數(shù)據(jù)倉(cāng)庫(kù)安裝配置及應(yīng)用；Scala編程語(yǔ)言的學(xué)習(xí)與實(shí)踐；Spark的安裝配置及使用討論與自學(xué)：針對(duì)具體的問(wèn)題，通過(guò)學(xué)生分組討論，培養(yǎng)學(xué)生分析問(wèn)題、解決問(wèn)題的能力。對(duì)討論問(wèn)題進(jìn)行延伸，學(xué)生自學(xué)后完成思考題。課后作業(yè)課堂表現(xiàn)實(shí)驗(yàn)報(bào)告教學(xué)目標(biāo)4課堂講授：將思政元素融入云計(jì)算和大數(shù)據(jù)應(yīng)用講解，培養(yǎng)學(xué)生銳意進(jìn)取、勇于擔(dān)當(dāng)?shù)膼?ài)國(guó)主義精神。對(duì)祖國(guó)在云計(jì)算和大數(shù)據(jù)的應(yīng)用中的先進(jìn)性和領(lǐng)先地位感到驕傲和自豪。實(shí)驗(yàn)教學(xué)：通過(guò)CSDN、知乎網(wǎng)站搜集OpenStack、大數(shù)據(jù)技術(shù)棧相關(guān)工具，通過(guò)部署實(shí)踐，能夠形成操作手冊(cè)和總結(jié)報(bào)告，培養(yǎng)勤奮刻苦、努力拼搏和創(chuàng)新精神與工匠精神。課堂表現(xiàn)課后作業(yè)總結(jié)報(bào)告四、課程學(xué)習(xí)內(nèi)容（一）課程學(xué)習(xí)內(nèi)容與課程目標(biāo)的關(guān)系序號(hào)課程學(xué)習(xí)內(nèi)容學(xué)時(shí)安排支撐的教學(xué)目標(biāo)課內(nèi)學(xué)時(shí)課外學(xué)時(shí)合計(jì)理論習(xí)題實(shí)踐小計(jì)慕課學(xué)習(xí)延展閱讀能力拓展線上作業(yè)小計(jì)1云計(jì)算概述224228101、2、3、42虛擬化技術(shù)44844210181、2、3、43數(shù)據(jù)存儲(chǔ)與管理技術(shù)334228111、2、3、44網(wǎng)絡(luò)虛擬化技術(shù)334228111、2、3、45大數(shù)據(jù)概述224228101、2、3、46大數(shù)據(jù)處理框架Hadoop3474228121、2、3、47大數(shù)據(jù)采集工具和消息隊(duì)列3344210131、2、3、48Spark計(jì)算引擎44844210181、2、3、49Flink計(jì)算引擎4264228141、2、3、410Hive數(shù)據(jù)倉(cāng)庫(kù)22444210141、2、3、411數(shù)據(jù)可視化224228101、2、3、4合計(jì)321648443022961441、2、3、4（二）課程學(xué)習(xí)的具體內(nèi)容第一單元：云計(jì)算概述【學(xué)習(xí)目標(biāo)】學(xué)生能夠掌握云計(jì)算的定義、云計(jì)算的特點(diǎn)和應(yīng)用、云計(jì)算安全。學(xué)生能夠了解云計(jì)算的發(fā)展簡(jiǎn)史。學(xué)生能夠了解云計(jì)算產(chǎn)業(yè)生態(tài)。學(xué)生能夠理解云計(jì)算的關(guān)鍵技術(shù)。【教學(xué)內(nèi)容】云計(jì)算的定義、云計(jì)算的特點(diǎn)云計(jì)算的應(yīng)用與安全云計(jì)算的發(fā)展簡(jiǎn)史云計(jì)算的產(chǎn)業(yè)生態(tài)云計(jì)算的關(guān)鍵技術(shù)【教學(xué)重點(diǎn)與難點(diǎn)】重點(diǎn)：云計(jì)算定義與特定的、云計(jì)算安全。難點(diǎn)：云計(jì)算關(guān)鍵技術(shù)?！窘虒W(xué)方法與學(xué)習(xí)活動(dòng)】通過(guò)講義和舉例講解，了解云計(jì)算的定義、云計(jì)算特點(diǎn)、云計(jì)算應(yīng)用與安全。通過(guò)圖文講義講解，了解云計(jì)算的發(fā)展簡(jiǎn)史、云計(jì)算的產(chǎn)業(yè)生態(tài)。通過(guò)講解和實(shí)驗(yàn)，理解云計(jì)算關(guān)鍵技術(shù)?！菊n外學(xué)習(xí)】不少于8學(xué)時(shí)閱讀參考資料不少于2學(xué)時(shí)。完成虛擬化軟件安裝配置，理解虛擬化技術(shù)5完成線上作業(yè)1學(xué)時(shí)。第二單元：虛擬化技術(shù)【學(xué)習(xí)目標(biāo)】學(xué)生能夠了解什么是虛擬化、虛擬化的特點(diǎn)、虛擬化的優(yōu)勢(shì)。學(xué)生能夠理解和掌握虛擬化和云計(jì)算關(guān)系、了解虛擬化簡(jiǎn)史、虛擬化模式。學(xué)生能夠理解服務(wù)虛擬化、存儲(chǔ)虛擬化、網(wǎng)絡(luò)虛擬化。【教學(xué)內(nèi)容】虛擬化定義、虛擬化特點(diǎn)、虛擬化的優(yōu)勢(shì)虛擬化與云計(jì)算虛擬化簡(jiǎn)史虛擬化模式：裸機(jī)模式、宿主機(jī)模式、混合模式服務(wù)器虛擬化：CPU虛擬化、內(nèi)存虛擬化、I/O虛擬化存儲(chǔ)虛擬化和網(wǎng)絡(luò)虛擬化【教學(xué)重點(diǎn)及難點(diǎn)】重點(diǎn)：什么是虛擬化、虛擬化特點(diǎn)；虛擬化與云計(jì)算。難點(diǎn)：服務(wù)器虛擬化?！窘虒W(xué)方法與學(xué)習(xí)活動(dòng)】提供素材課堂講解和討論虛擬化特點(diǎn)、虛擬化和云計(jì)算關(guān)系。通過(guò)圖文講義講解服務(wù)器虛擬化技術(shù)，包括CPU虛擬化、內(nèi)存虛擬化、I/O虛擬化?！菊n外學(xué)習(xí)】不少于10學(xué)時(shí)閱讀參考資料（OpenStack）不少于7學(xué)時(shí)。完成虛擬化軟件安裝實(shí)踐，通過(guò)配置理解CPU虛擬化、內(nèi)存虛擬化、I/O虛擬化2學(xué)時(shí)完成線上作業(yè)1學(xué)時(shí)。第三單元：數(shù)據(jù)存儲(chǔ)與管理技術(shù)【學(xué)習(xí)目標(biāo)】學(xué)生能夠了解集中式存儲(chǔ)和分布式存儲(chǔ)。學(xué)生能夠理解分布式文件存儲(chǔ)、分布式對(duì)象存儲(chǔ)、分布式數(shù)據(jù)庫(kù)。學(xué)生能夠理解存儲(chǔ)虛擬化和云存儲(chǔ)【教學(xué)內(nèi)容】存儲(chǔ)分類(lèi)、存儲(chǔ)接口、集中式存儲(chǔ)和分布式存儲(chǔ)分布式文件存儲(chǔ)：HDFS和Ceph分布式對(duì)象存儲(chǔ)：Swift和Haystack分布式數(shù)據(jù)庫(kù)：數(shù)據(jù)庫(kù)架構(gòu)模型、大規(guī)模并行處理數(shù)據(jù)庫(kù)、分布式數(shù)據(jù)庫(kù)存儲(chǔ)虛擬化、云存儲(chǔ)、云存儲(chǔ)應(yīng)用實(shí)例【教學(xué)重點(diǎn)及難點(diǎn)】重點(diǎn)：分布式存儲(chǔ)：分布式文件存儲(chǔ)、分布式對(duì)象存儲(chǔ)、分布式數(shù)據(jù)庫(kù)。難點(diǎn)：分布式文件存儲(chǔ)和對(duì)象存儲(chǔ)【教學(xué)方法與學(xué)習(xí)活動(dòng)】通過(guò)案例講解和理論釋義，能夠理解分布式存儲(chǔ)在云計(jì)算服務(wù)中應(yīng)用，分布式數(shù)據(jù)庫(kù)重要性。通過(guò)應(yīng)用實(shí)例理解分布式文件存儲(chǔ)和分布式對(duì)象存儲(chǔ)?！菊n外學(xué)習(xí)】不少于8學(xué)時(shí)閱讀參考資料不少于3學(xué)時(shí)。實(shí)驗(yàn)完成分布式文件存儲(chǔ)、分布式對(duì)象存儲(chǔ)和分布式數(shù)據(jù)庫(kù)4學(xué)時(shí)完成線上作業(yè)1學(xué)時(shí)。第四單元：網(wǎng)絡(luò)虛擬化【學(xué)習(xí)目標(biāo)】學(xué)生能夠了解常見(jiàn)網(wǎng)絡(luò)虛擬化、網(wǎng)絡(luò)虛擬化中物理網(wǎng)絡(luò)、虛擬化中虛擬化網(wǎng)絡(luò)、虛擬交換機(jī)。學(xué)生能夠理解云計(jì)算與網(wǎng)絡(luò)虛擬化關(guān)系、軟件定義網(wǎng)絡(luò)原理、OpenFlow協(xié)議功能。學(xué)生能夠理解網(wǎng)絡(luò)功能虛擬化、Overlay技術(shù)?！窘虒W(xué)內(nèi)容】常見(jiàn)網(wǎng)絡(luò)虛擬化、網(wǎng)絡(luò)虛擬化中物理網(wǎng)絡(luò)、虛擬化中虛擬化網(wǎng)絡(luò)虛擬交換機(jī)云計(jì)算與網(wǎng)絡(luò)虛擬化軟件定義網(wǎng)絡(luò)OpenFlow協(xié)議網(wǎng)絡(luò)功能虛擬化Overlay技術(shù)網(wǎng)絡(luò)切片【教學(xué)重點(diǎn)及難點(diǎn)】重點(diǎn)：虛擬交換機(jī)、軟件定義網(wǎng)絡(luò)、OpenFlow協(xié)議、網(wǎng)絡(luò)功能虛擬化、Overlay技術(shù)難點(diǎn)：軟件定義網(wǎng)絡(luò)、網(wǎng)絡(luò)功能虛擬化【教學(xué)方法與學(xué)習(xí)活動(dòng)】通過(guò)案例教學(xué)、舉例說(shuō)明、圖文講義講解網(wǎng)絡(luò)虛擬化基本原理、網(wǎng)絡(luò)虛擬化和云計(jì)算關(guān)系，理解網(wǎng)絡(luò)虛擬化相關(guān)技術(shù)。提供閱讀材料，學(xué)習(xí)和理解虛擬交換機(jī)、軟件定義網(wǎng)絡(luò)、OpenFlow協(xié)議、網(wǎng)絡(luò)功能虛擬化、Overlay技術(shù)基本原理和應(yīng)用。【課外學(xué)習(xí)】不少于8學(xué)時(shí)閱讀參考資料不少于4學(xué)時(shí)。完成網(wǎng)絡(luò)虛擬化應(yīng)用案例的搜集、整理和總結(jié)2學(xué)時(shí)完成線下作業(yè)2學(xué)時(shí)。第五單元：大數(shù)據(jù)概述【學(xué)習(xí)目標(biāo)】學(xué)生能夠理解大數(shù)據(jù)定義、大數(shù)據(jù)特點(diǎn)、大數(shù)據(jù)應(yīng)用、大數(shù)據(jù)系統(tǒng)架構(gòu)。學(xué)生能夠掌握大數(shù)據(jù)關(guān)鍵技術(shù)。學(xué)生能夠理解大數(shù)據(jù)與云計(jì)算、大數(shù)據(jù)與物聯(lián)網(wǎng)、大數(shù)據(jù)與人工智能之間關(guān)系?！窘虒W(xué)內(nèi)容】大數(shù)據(jù)定義、大數(shù)據(jù)特點(diǎn)大數(shù)據(jù)系統(tǒng)架構(gòu)大數(shù)據(jù)應(yīng)用大數(shù)據(jù)關(guān)鍵技術(shù)大數(shù)據(jù)與云計(jì)算大數(shù)據(jù)與物聯(lián)網(wǎng)大數(shù)據(jù)與人工智能【教學(xué)重點(diǎn)及難點(diǎn)】重點(diǎn)：大數(shù)據(jù)特點(diǎn)、大數(shù)據(jù)系統(tǒng)架構(gòu)、大數(shù)據(jù)關(guān)鍵技術(shù)難點(diǎn)：大數(shù)據(jù)關(guān)鍵技術(shù)?！窘虒W(xué)方法與學(xué)習(xí)活動(dòng)】通過(guò)案例講解大數(shù)據(jù)基本概念和應(yīng)用。圖示講解大數(shù)據(jù)關(guān)鍵技術(shù)：存儲(chǔ)技術(shù)和處理技術(shù)原理?！菊n外學(xué)習(xí)】不少于8學(xué)時(shí)通過(guò)熱門(mén)大數(shù)據(jù)技術(shù)博客、專(zhuān)業(yè)網(wǎng)站的大數(shù)據(jù)欄目擴(kuò)展大數(shù)據(jù)基礎(chǔ)知識(shí)及應(yīng)用的學(xué)習(xí)，了解大數(shù)據(jù)發(fā)展的動(dòng)態(tài)3學(xué)時(shí)。知乎網(wǎng)站關(guān)注熱門(mén)大數(shù)據(jù)技術(shù)學(xué)習(xí)3學(xué)時(shí)。完成線下作業(yè)2學(xué)時(shí)。第六單元：大數(shù)據(jù)計(jì)算框架Hadoop【學(xué)習(xí)目標(biāo)】學(xué)生能夠了解Hadoop生態(tài)。學(xué)生能夠理解分布式文件系統(tǒng)HDFS。學(xué)生能夠掌握MapReduce計(jì)算引擎學(xué)生能夠理解計(jì)算資源管理和調(diào)度平臺(tái)YARN【教學(xué)內(nèi)容】Hadoop的簡(jiǎn)介和Hadoop的生態(tài)分布式文件系統(tǒng)HDFSMapReduce計(jì)算引擎計(jì)算資源管理和調(diào)度平臺(tái)YARN【教學(xué)重點(diǎn)及難點(diǎn)】重點(diǎn)：Hadoop計(jì)算框架、分布式文件系統(tǒng)HDFS、資源管理調(diào)度平臺(tái)YARN。難點(diǎn)：資源管理調(diào)度平臺(tái)YARN和使用?！窘虒W(xué)方法與學(xué)習(xí)活動(dòng)】示例講解HDFS原理和應(yīng)用、MapReduce計(jì)算引擎原理和應(yīng)用、資源管理調(diào)度平臺(tái)YARN原理和應(yīng)用實(shí)驗(yàn)完成Hadoop環(huán)境搭建，實(shí)踐HDFS、YARN基本操作指令，理解原理【課外學(xué)習(xí)】不少于8學(xué)時(shí)閱讀參考資料不少于3學(xué)時(shí)。CSDN和知乎學(xué)習(xí)Hadoop環(huán)境的搭建和應(yīng)用4學(xué)時(shí)完成線上作業(yè)1學(xué)時(shí)第七單元：數(shù)據(jù)采集和消息隊(duì)列【學(xué)習(xí)目標(biāo)】學(xué)生能夠了解大數(shù)據(jù)來(lái)源和大數(shù)據(jù)采集。學(xué)生能夠了解日志采集工具Flume和數(shù)據(jù)遷移工具Sqoop。學(xué)生能夠掌握消息隊(duì)列的作用、常見(jiàn)消息隊(duì)列【教學(xué)內(nèi)容】大數(shù)據(jù)來(lái)源和大數(shù)據(jù)采集大數(shù)據(jù)采集方式、大數(shù)據(jù)采集工具消息隊(duì)列、消息隊(duì)列作用常用消息隊(duì)列【教學(xué)重點(diǎn)及難點(diǎn)】重點(diǎn)：大數(shù)據(jù)采集、消息隊(duì)列作用。難點(diǎn)：大數(shù)據(jù)采集工具與消息隊(duì)列工具實(shí)踐?！窘虒W(xué)方法與學(xué)習(xí)活動(dòng)】示例講解大數(shù)據(jù)采集工具原理和使用、消息隊(duì)列原理、作用。實(shí)驗(yàn)完成Flume、Sqoop工具部署搭建和使用、消息隊(duì)列的部署搭建和使用?！菊n外學(xué)習(xí)】不少于10學(xué)時(shí)閱讀參考資料不少于4學(xué)時(shí)。CSDN和知乎學(xué)習(xí)Sqoop環(huán)境的搭建和應(yīng)用4學(xué)時(shí)完成線上作業(yè)2學(xué)時(shí)第八單元：Spark計(jì)算引擎【學(xué)習(xí)目標(biāo)】學(xué)生能夠了解Spark大數(shù)據(jù)計(jì)算框架。學(xué)生能夠理解Spark的架構(gòu)、應(yīng)用場(chǎng)景。學(xué)生能夠掌握Spark的搭建和部署學(xué)生能夠掌握Spark的應(yīng)用實(shí)踐【教學(xué)內(nèi)容】Spark概述Spark架構(gòu)和部署模式Spark運(yùn)行流程Spark數(shù)據(jù)處理模型Spark的搭建部署與實(shí)踐【教學(xué)重點(diǎn)及難點(diǎn)】重點(diǎn)：Spark的架構(gòu)和部署模式、Spark數(shù)據(jù)處理模型、Spark的部署與實(shí)踐。難點(diǎn)：Spark運(yùn)行流程和數(shù)據(jù)處理模型?！窘虒W(xué)方法與學(xué)習(xí)活動(dòng)】示例圖文講解Spark的介紹、Spark的架構(gòu)、Spark的部署模式、Spark的運(yùn)行流程實(shí)際部署Spark的環(huán)境和錄屏視頻完成Spark的搭建和實(shí)踐【課外學(xué)習(xí)】不少于10學(xué)時(shí)閱讀參考資料不少于4學(xué)時(shí)。CSDN和知乎學(xué)習(xí)Spark環(huán)境的搭建和應(yīng)用5學(xué)時(shí)完成線上作業(yè)1學(xué)時(shí)第九單元：流式計(jì)算引擎Flink【學(xué)習(xí)目標(biāo)】學(xué)生能夠了解Flink計(jì)算引擎。學(xué)生能夠理解Flink應(yīng)用場(chǎng)景和基礎(chǔ)軟件棧。學(xué)生能夠掌握Flink基本組件和程序模型學(xué)生能夠理解Flink運(yùn)行時(shí)架構(gòu)學(xué)生能夠理解Flink時(shí)間處理機(jī)制學(xué)生能夠理解Flink狀態(tài)和容錯(cuò)機(jī)制【教學(xué)內(nèi)容】Flink計(jì)算引擎簡(jiǎn)介、特點(diǎn)、Flink應(yīng)用場(chǎng)景Flink基本組件和程序模型Flink運(yùn)行時(shí)架構(gòu)Flink時(shí)間處理機(jī)制Flink狀態(tài)和容錯(cuò)機(jī)制Flink搭建和部署Flink應(yīng)用程序示例【教學(xué)重點(diǎn)及難點(diǎn)】重點(diǎn)：Flink計(jì)算引擎基本組件、程序模型、運(yùn)行時(shí)架構(gòu)。難點(diǎn)：Flink時(shí)間處理機(jī)制、狀態(tài)和容錯(cuò)機(jī)制?！窘虒W(xué)方法與學(xué)習(xí)活動(dòng)】示例圖文講解Flink計(jì)算引擎、Flink的應(yīng)用場(chǎng)景、Flink的基本組件、Flink的程序模型、Flink運(yùn)行時(shí)架構(gòu)實(shí)際部署Flink的環(huán)境和錄屏視頻完成Flink的搭建和實(shí)踐【課外學(xué)習(xí)】不少于8學(xué)時(shí)閱讀參考資料不少于3學(xué)時(shí)。CSDN和知乎學(xué)習(xí)Flink計(jì)算引擎環(huán)境的搭建和使用4學(xué)時(shí)完成線上作業(yè)1學(xué)時(shí)第十單元：Hive數(shù)據(jù)倉(cāng)庫(kù)【學(xué)習(xí)目標(biāo)】學(xué)生能夠了解大數(shù)據(jù)分析統(tǒng)計(jì)工具Hive。學(xué)生能夠理解Hive系統(tǒng)架構(gòu)和工作流程。學(xué)生能夠理解Hive的數(shù)據(jù)存儲(chǔ)模型學(xué)生能夠掌握Hive的安裝部署和使用【教學(xué)內(nèi)容】Hive的簡(jiǎn)介Hive的系統(tǒng)架構(gòu)Hive的工作流程Hive的數(shù)據(jù)存儲(chǔ)模型Hive的安裝部署Hive的客戶(hù)端連接Hive的數(shù)據(jù)倉(cāng)庫(kù)操作【教學(xué)重點(diǎn)及難點(diǎn)】重點(diǎn)：Hive的系統(tǒng)架構(gòu)、工作流程、Hive的安裝部署與使用。難點(diǎn)：Hive的系統(tǒng)架構(gòu)、Hive的數(shù)據(jù)存儲(chǔ)模型?！窘虒W(xué)方法與學(xué)習(xí)活動(dòng)】示例、圖文講義講解Hive系統(tǒng)架構(gòu)、工作流程、數(shù)據(jù)存儲(chǔ)模型。通過(guò)實(shí)驗(yàn)操作手冊(cè)和錄屏視頻完成Hive的搭建和使用實(shí)驗(yàn)完成Hive部署搭建和使用，學(xué)會(huì)使用Hive大數(shù)據(jù)分析處理工具。【課外學(xué)習(xí)】不少于10學(xué)時(shí)閱讀參考資料不少于3學(xué)時(shí)。CSDN或知乎網(wǎng)站案例學(xué)習(xí)Hive環(huán)境的搭建和應(yīng)用6學(xué)時(shí)完成線上作業(yè)1學(xué)時(shí)第十一單元：數(shù)據(jù)可視化【學(xué)習(xí)目標(biāo)】學(xué)生能夠了解數(shù)據(jù)可視化重要性和數(shù)據(jù)可視化方式。學(xué)生能夠了解數(shù)據(jù)可視化工具。學(xué)生能夠掌握數(shù)據(jù)可視化常用方式【教學(xué)內(nèi)容】數(shù)據(jù)可視化簡(jiǎn)介數(shù)據(jù)可視化特點(diǎn)數(shù)據(jù)可視化工具數(shù)據(jù)可視化常用方式【教學(xué)重點(diǎn)及難點(diǎn)】重點(diǎn)：數(shù)據(jù)可視化作用、數(shù)據(jù)可視化工具、數(shù)據(jù)可視化常用方式。難點(diǎn)：數(shù)據(jù)可視化實(shí)踐?！窘虒W(xué)方法與學(xué)習(xí)活動(dòng)】示例圖文講解數(shù)據(jù)可視化重要性、數(shù)據(jù)可視化作用、數(shù)據(jù)可視化工具、數(shù)據(jù)可視化方式通過(guò)實(shí)際案例講解數(shù)據(jù)可視化實(shí)踐和應(yīng)用【課外學(xué)習(xí)】不少于8學(xué)時(shí)閱讀參考資料不少于3學(xué)時(shí)。CSDN和知乎網(wǎng)站學(xué)習(xí)數(shù)據(jù)可視化工具和應(yīng)用案例4學(xué)時(shí)完成線上作業(yè)1學(xué)時(shí)實(shí)驗(yàn)教學(xué)內(nèi)容序號(hào)教學(xué)內(nèi)容教學(xué)要求學(xué)時(shí)支撐的課程目標(biāo)1虛擬化技術(shù)完成虛擬化軟件VirtualBox安裝部署，安裝CentOS操作系統(tǒng)，安裝JDK，安裝MySQL。41、2、42大數(shù)據(jù)平臺(tái)Hadoop大數(shù)據(jù)計(jì)算框架Hadoop3.0安裝部署配置；HDFS和YARN常用指令操作41、3、43Hive大數(shù)據(jù)倉(cāng)庫(kù)Hive數(shù)據(jù)倉(cāng)庫(kù)安裝配置及應(yīng)用41、3、44Spark大數(shù)據(jù)計(jì)算引擎Scala編程語(yǔ)言的學(xué)習(xí)與實(shí)踐；Spark的安裝配置及使用41、3、4合計(jì)16五、課程考核方式《云計(jì)算與大數(shù)據(jù)技術(shù)》課程是考查課程?？己朔绞剑鹤鳂I(yè)+實(shí)驗(yàn)+綜合實(shí)踐或線上期末考試。成績(jī)?cè)u(píng)定：總評(píng)成績(jī)=作業(yè)成績(jī)（15%）+實(shí)驗(yàn)成績(jī)（45%）+期末成績(jī)（40%）1．平時(shí)成績(jī)考核作業(yè)10分（線上單元測(cè)），4個(gè)實(shí)驗(yàn)50分2．期末考核綜合實(shí)踐或線上期末考試40分期末考核可通過(guò)學(xué)堂在線或智慧樹(shù)課程平臺(tái)的在線期末考試完成，也可根據(jù)需要選擇完成一綜合應(yīng)用案例（代碼和總結(jié)）?？己嗽u(píng)價(jià)標(biāo)準(zhǔn)：本課程的考核方式、內(nèi)容、