項目3整合和處理食品銷售數(shù)據(jù)教案課程名稱：ETL數(shù)據(jù)整合和處理課程類別：必修適用專業(yè)：大數(shù)據(jù)技術(shù)類相關(guān)專業(yè)總學時：64學時（其中理論30學時，實驗34學時）總學分：4.0學分本章學時：16學時材料清單《ETL數(shù)據(jù)整合和處理（Kettle）》（第2版）（微課版）教材。引導性提問。探究性問題。拓展性問題。教學目標與基本要求教學目標講授排序記錄、Multiwaymergejoin（多路合并）、字段選擇、替換NULL值（替換空值）、合并記錄、排序合并、剪切字符串、拆分字段、去除重復記錄、過濾記錄、Replaceinstring（字符串替換）和表輸出等常用數(shù)據(jù)整合和處理組件，讓學生達到以下教學目標：熟悉數(shù)據(jù)整合和處理常用組件的應用。掌握數(shù)據(jù)整合和處理常用組件的參數(shù)設(shè)置。熟悉組件處理后預覽結(jié)果數(shù)據(jù)的方法?；疽笳莆諗?shù)據(jù)整合和處理常用組件及其參數(shù)設(shè)置。掌握瀏覽數(shù)據(jù)整合和處理常用組件執(zhí)行結(jié)果和出錯處理的方法。問題引導性提問引導性提問，是教師根據(jù)教材內(nèi)容和學生實際水平，有針對性地提出問題，去啟發(fā)引導學生去思考和解決問題，從而達到理解、掌握課程知識點和技術(shù)點。數(shù)據(jù)處理是不是只針對數(shù)據(jù)庫的數(shù)據(jù)？是否只用一個組件就可以進行記錄處理嗎？對數(shù)據(jù)進行整合和處理的組件參數(shù)設(shè)置是否類似？表輸出組件和其它獲取源數(shù)據(jù)組件的參數(shù)是否類似？探究性問題探究性問題，是教師在深入鉆研教材、引導性提問的基礎(chǔ)上，或者是在引導式提問中尚未涉及，又是課程中的重要內(nèi)容，從重點、難點中切入，而精心設(shè)計的插入式提問。去除重復記錄為什么要先進行排序？數(shù)據(jù)記錄中為什么要替換NULL值？字符串替換對那些數(shù)據(jù)類型進行操作？過濾記錄需要排序嗎？那些數(shù)據(jù)類型的字段可以進行排序？選擇字段可以刪除數(shù)據(jù)嗎？拆分字段要增加字段嗎？刪除字段數(shù)據(jù)使用什么組件？合并記錄需要排序嗎？排序合并是自動排序后合并嗎？表輸出是將數(shù)據(jù)輸出到Excel的工作表嗎？拓展性問題拓展性問題，是教師在深刻理解教材的意義、學生的學習動態(tài)后，根據(jù)學生學習層次，而提出的切實可行的實際操作問題。教師亦可以提供拓展資料，給學生研究探討，從而完成拓展性的問題。表輸出組件和其它獲取源數(shù)據(jù)組件有什么差異？剪切字符串、拆分字段有什么異同？過濾記錄和去除重復記錄組件有什么異同？主要知識點、重點與難點主要知識點排序記錄、Multiwaymergejoin、字段選擇、替換NULL值、合并記錄、排序合并、剪切字符串、拆分字段、去除重復記錄、過濾記錄、Replaceinstring和表輸出等數(shù)據(jù)整合和處理組件的參數(shù)設(shè)置和使用。重點排序記錄、Multiwaymergejoin、字段選擇、替換NULL值、合并記錄、排序合并、剪切字符串、拆分字段、去除重復記錄、過濾記錄、Replaceinstring、表輸出等數(shù)據(jù)整合和處理組件的應用場景和操作。難點排序記錄、Multiwaymergejoin、字段選擇、替換NULL值、合并記錄、排序合并、剪切字符串、拆分字段、去除重復記錄、過濾記錄、Replaceinstring和表輸出等數(shù)據(jù)整合和處理組件的參數(shù)設(shè)置和不同之處。字段選擇組件的使用。過濾記錄組件的使用。字符串替換、字符串替換等組件使用的區(qū)別。教學過程設(shè)計理論教學過程采用食品銷售數(shù)據(jù)，整合和處理A、B、C、D平臺的食品銷售數(shù)據(jù)，并輸入出到數(shù)據(jù)庫中。排序記錄組件及其參數(shù)設(shè)置。Multiwaymergejoin組件及其參數(shù)設(shè)置。字段選擇組件及其參數(shù)設(shè)置。替換NULL值組件及其參數(shù)設(shè)置。合并記錄組件及其參數(shù)設(shè)置。排序合并組件及其參數(shù)設(shè)置。剪切字符串組件及其參數(shù)設(shè)置。拆分字段組件及其參數(shù)設(shè)置。去除重復記錄組件及其參數(shù)設(shè)置。過濾記錄組件及其參數(shù)設(shè)置。Replaceinstring組件及其參數(shù)設(shè)置。表輸出組件及其參數(shù)設(shè)置。實驗教學過程采用日化銷售數(shù)據(jù)，整合和處理A、B、C、D平臺的食品銷售數(shù)據(jù)，并輸出到數(shù)據(jù)庫中。建立轉(zhuǎn)換工程，合并D平臺的食品銷售數(shù)據(jù)。創(chuàng)建CSV文件輸入、排序記錄、多路合并、字段選擇組件，設(shè)置組件參數(shù)，運行和預覽數(shù)據(jù)。處理B、C平臺的食品銷售數(shù)據(jù)。創(chuàng)建CSV文件輸入、字段選擇、替換NULL值等組件，設(shè)置組件參數(shù)，運行和預覽數(shù)據(jù)。合并A、B、C、D平臺的食品銷售數(shù)據(jù)。創(chuàng)建CSV文件輸入、合并記錄、排序合并等組件，設(shè)置組件參數(shù)，運行和預覽數(shù)據(jù)。剪切平臺字段的代碼字符串。創(chuàng)建剪切字符串組件，設(shè)置組件參數(shù)，運行和預覽數(shù)據(jù)。拆分經(jīng)營單位字段。創(chuàng)建拆分字段組件，設(shè)置組件參數(shù)，運行和預覽數(shù)據(jù)。刪除數(shù)據(jù)中多余字段和重復記錄。創(chuàng)建字段選擇與過濾記錄組件，設(shè)置組件參數(shù)，運行和預覽數(shù)據(jù)。過濾并替換不規(guī)范的字段數(shù)據(jù)。創(chuàng)建過濾記錄和字符串替換組件，設(shè)置組件參數(shù)，運行和預覽數(shù)據(jù)。輸出銷售數(shù)據(jù)到數(shù)據(jù)庫表。創(chuàng)建表輸出組件，設(shè)置組件參數(shù)，運行和預覽數(shù)據(jù)。教材與參考資料教材教材：鄭健，