西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)-投標(biāo)文件_第1頁
西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)-投標(biāo)文件_第2頁
西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)-投標(biāo)文件_第3頁
西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)-投標(biāo)文件_第4頁
西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)-投標(biāo)文件_第5頁
已閱讀5頁,還剩412頁未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)

文檔簡介

西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng) 投標(biāo)文件廣州思邁特軟件有限公司 第頁參加本項目準(zhǔn)備活動前三年內(nèi)無重大違法記錄聲明無重大違法記錄聲明致:中經(jīng)國際招標(biāo)集團(tuán)有限公司西安歐亞學(xué)院廣州思邁特軟件有限公司(投標(biāo)人名稱)鄭重聲明,我方參加貴公司組織的西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)項目(項目編號為CEITCL-SN-CZHW-150910)的招標(biāo)活動前三年內(nèi)無重大違法活動記錄,符合《政府招標(biāo)法》規(guī)定的供應(yīng)商資格條件。我方對此聲明負(fù)全部法律責(zé)任。特此聲明。投標(biāo)單位全稱(蓋章):廣州思邁特軟件有限公司法人代表或授權(quán)代表(簽字):日期:2015年10月21日

售后服務(wù)承諾表招標(biāo)編號:CEITCL-SN-CZHW-150910招標(biāo)項目名稱:西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)投標(biāo)人自行提供承諾服務(wù)內(nèi)容(至少包含貨物驗收、售后技術(shù)維護(hù)服務(wù)、服務(wù)時間響應(yīng)、其他等)致中經(jīng)國際招標(biāo)集團(tuán)有限公司、西安歐亞學(xué)院我司同意為西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)項目承諾以下服務(wù)內(nèi)容:1.安裝要求:按照校方要求,在合同生效15個工作日內(nèi),完成系統(tǒng)部署安裝,數(shù)據(jù)接口的免費(fèi)對接,達(dá)到驗收要求。如未達(dá)到驗收要求,則合同自動終止。2.系統(tǒng)故障響應(yīng)時效:公司應(yīng)在當(dāng)?shù)赜修k事處或分公司,方便及時有效的解決問題,通過上門服務(wù)與網(wǎng)絡(luò)在線服務(wù)結(jié)合,及時解決該軟件的各種問題。熱線服務(wù)和遠(yuǎn)程在線要求1小時內(nèi)響應(yīng),4小時內(nèi)解決問題;熱線服務(wù)和遠(yuǎn)程在線都無法解決的重大問題能夠上門服務(wù),2個工作日到達(dá)現(xiàn)場,并在到達(dá)后的24小時內(nèi)有效解決問題。3.培訓(xùn):首次安裝完成后,免費(fèi)提供面向管理員、操作人員的上門操作培訓(xùn),培訓(xùn)時間不少于3個工作日。4.質(zhì)保期3年,質(zhì)保期內(nèi)提供系統(tǒng)bug維護(hù),系統(tǒng)免費(fèi)升級服務(wù)。具體服務(wù)條款以合同約定為準(zhǔn)。投標(biāo)單位全稱(蓋章):法人代表或授權(quán)代表(簽字):日期:2015年10月21日技術(shù)部分

項目清單投標(biāo)單位名稱:廣州思邁特軟件有限公司項目編號:CEITCL-SN-CZHW-150910序號項目名稱品牌規(guī)格及型號制造廠家產(chǎn)地主要規(guī)格參數(shù)1數(shù)據(jù)采集分析系統(tǒng)思邁特SmartbiV3.0廣州思邁特軟件有限公司中國參看本技術(shù)標(biāo)書的描述注:1、如實逐項填寫,不得空項??杖表椖繉⒁暈闆]有實質(zhì)性響應(yīng)招標(biāo)文件。2、若貨物無具體型號和注冊商標(biāo)的必須特別注明。各項貨物詳細(xì)技術(shù)性能可另頁描述。投標(biāo)單位授權(quán)代表簽字:(投標(biāo)單位公章)日期:2015年10月21日

技術(shù)規(guī)格性能偏離表招標(biāo)編號:CEITCL-SN-CZHW-150910招標(biāo)項目名稱:西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)采購序號招標(biāo)文件要求投標(biāo)內(nèi)容備注章節(jié)、條款號條款內(nèi)容描述章節(jié)、條款號條款內(nèi)容描述1第三章之3項目建設(shè)需求及技術(shù)服務(wù)需求第6、7、8章技術(shù)應(yīng)答、總體方案、技術(shù)方案無偏離2第三章之3.1.1基本數(shù)據(jù)庫要求6.1.1技術(shù)應(yīng)答無偏離3第三章之3.1.2數(shù)據(jù)采集過程管理6.1.2技術(shù)應(yīng)答無偏離4第三章之3.1.3教學(xué)評估功能要求6.1.3技術(shù)應(yīng)答無偏離5第三章之3.1.4統(tǒng)計分析功能6.1.4技術(shù)應(yīng)答無偏離6第三章之3.1.5報表功能要求6.1.5技術(shù)應(yīng)答無偏離7第三章之3.1.6課堂數(shù)據(jù)采集系統(tǒng)6.1.6技術(shù)應(yīng)答無偏離8第三章之3.2.1技術(shù)要求6.2.1技術(shù)應(yīng)答無偏離9第三章之3.2.2系統(tǒng)安全要求6.2.2及8.7技術(shù)應(yīng)答、系統(tǒng)安全管理無偏離10第三章之3.2.3售后服務(wù)要求6.2.3及第13章技術(shù)應(yīng)答、售后維護(hù)服務(wù)介紹無偏離注:根據(jù)招標(biāo)人提供的技術(shù)要求進(jìn)行逐條響應(yīng)。投標(biāo)單位全稱(蓋章):法人代表或授權(quán)代表(簽字):日期:2015年10月21日項目方案綜述本項目建議書基于廣州思邁特軟件有限公司(以下簡稱“思邁特”)對西安歐亞學(xué)院“數(shù)據(jù)采集分析系統(tǒng)”項目需求的理解,以及思邁特為教育部及各高校建設(shè)教學(xué)基本狀態(tài)數(shù)據(jù)庫系統(tǒng)、數(shù)據(jù)采集分析系統(tǒng)的經(jīng)驗基礎(chǔ)之上,期望能結(jié)合西安歐亞學(xué)院的實際,全面闡述思邁特公司對“數(shù)據(jù)采集分析系統(tǒng)”的項目建設(shè)方案。旨在幫助西安歐亞學(xué)院建立一個高效的、易用性、可管理性的、完整的、并隨將來業(yè)務(wù)發(fā)展可擴(kuò)展的數(shù)據(jù)采集分析平臺。思邁特公司是國內(nèi)領(lǐng)先的企業(yè)級商業(yè)智能、數(shù)據(jù)分析軟件提供商,不僅在教育行業(yè),而且還在金融、政府及公共管理部門、企業(yè)等行業(yè)擁有眾多客戶,并獲得極高的評價。其主要原因是思邁特?fù)碛凶罴舛说募夹g(shù)、超前的解決方案與豐富的實施經(jīng)驗,能夠幫助客戶建立一流的數(shù)據(jù)倉庫(EDW)、數(shù)據(jù)分析系統(tǒng)。思邁特期望能將先進(jìn)的技術(shù)和成功的經(jīng)驗應(yīng)用于西安歐亞學(xué)院,為西安歐亞學(xué)院的IT系統(tǒng)建設(shè)和學(xué)校發(fā)展貢獻(xiàn)力量。項目建設(shè)背景及目標(biāo)項目建設(shè)背景西安歐亞學(xué)院成立于1995年,是一所經(jīng)國家教育部批準(zhǔn),以管理、經(jīng)濟(jì)為主,藝術(shù)、文學(xué)、教育、工學(xué)等協(xié)調(diào)發(fā)展的國際化應(yīng)用型普通本科高校。歐亞學(xué)院主張為學(xué)生提供有用的教育,使學(xué)生“學(xué)了有用,學(xué)得受用”;懂得學(xué)生的個性化特征,和當(dāng)今市場經(jīng)濟(jì)最新鮮的變革,并且能夠前瞻性地把握現(xiàn)代社會對人才的需求。我們致力培育優(yōu)秀的畢業(yè)生,使其具備專業(yè)才能和批判性思維,而且追求終身學(xué)習(xí),以應(yīng)付全球化的工作環(huán)境。目前,學(xué)校有22000余學(xué)生。開設(shè)32個本科專業(yè),18個高職專業(yè),專任教師881人,外聘教師257人,其中高級職稱教師占教師總數(shù)的35.07%,碩士以上學(xué)位教師占教師總數(shù)的54.26%。隨著我國高等教育的快速發(fā)展,高校之間的競爭愈加激烈,如何提高教學(xué)質(zhì)量、形成核心競爭力已經(jīng)成為高校發(fā)展的重要戰(zhàn)略舉措。教育部也出臺了一系列政策文件及配套的管理措施,例如《國家中長期教育改革和發(fā)展規(guī)劃綱要(2010—2020年)》、《教育部關(guān)于全面提高高等教育質(zhì)量的若干意見》等,教育部同時在大力推進(jìn)高等學(xué)校本科教學(xué)工作審核評估,所有本科院校均將參與評估,切實推進(jìn)高等教育內(nèi)涵式發(fā)展,提高本科教學(xué)水平和人才培養(yǎng)質(zhì)量。建設(shè)數(shù)據(jù)采集分析系統(tǒng)是保障教育質(zhì)量的重要手段,也是一所高校的辦學(xué)水平、辦學(xué)實力的重要體現(xiàn)。在高校信息化建設(shè)工作的推動下我校已經(jīng)擁有眾多的業(yè)務(wù)系統(tǒng)信息數(shù)據(jù),隨著時間的積累,這些相對原始的業(yè)務(wù)信息數(shù)據(jù)已經(jīng)不斷地擴(kuò)張壯大,但是這樣的信息數(shù)據(jù)難以為學(xué)校的教學(xué)、科研、管理和社會服務(wù)提供可視化的決策依據(jù),不能滿足學(xué)校決策日趨準(zhǔn)確化、實時化和科學(xué)化的需求。學(xué)校迫切需要對這些數(shù)據(jù)進(jìn)行整合、加工、展現(xiàn)和分析,依據(jù)數(shù)據(jù)客觀地將學(xué)校全面運(yùn)行狀態(tài)實時地展現(xiàn)出來,并對運(yùn)行中即將或已經(jīng)出現(xiàn)異常的情況給予提醒,讓各項運(yùn)行狀態(tài)指標(biāo)都常態(tài)、可視化監(jiān)測,并對變化趨勢進(jìn)行分析,實現(xiàn)管理的實時性、準(zhǔn)確性、持續(xù)性,同時能便捷地滿足教育部和上級主管部門對各種數(shù)據(jù)和報表上報要求。項目總體目標(biāo)通過建設(shè)完整的信息采集分析系統(tǒng),實現(xiàn)以下目標(biāo):1、搭建學(xué)校數(shù)據(jù)監(jiān)控中心,實現(xiàn)多維度的狀態(tài)數(shù)據(jù)管理,為管理者提供常態(tài)、及時、綜合的狀態(tài)數(shù)據(jù)管理與質(zhì)量監(jiān)控。2、為學(xué)校內(nèi)部評價提供數(shù)據(jù)支持。提供各類數(shù)據(jù)橫向、縱向、趨勢分析及指標(biāo)預(yù)警,為學(xué)校管理決策層在質(zhì)量提升與持續(xù)改進(jìn)、資源分配、政策制定、規(guī)劃與發(fā)展、個性化培養(yǎng)等方面提供支持。3、與政府部門數(shù)據(jù)對接,支持外部評估??筛鶕?jù)各類評估的具體需求,生成相應(yīng)的定量指標(biāo)結(jié)果,實現(xiàn)與教育部評估中心、陜西省教育廳的對接。4、支持課堂信息管理。提高校領(lǐng)導(dǎo),督導(dǎo)團(tuán),院系領(lǐng)導(dǎo)和同行相結(jié)合的聽課制度的落實,從而及時了解教師的教學(xué)情況及時給出改進(jìn)措施,提高授課質(zhì)量和效果。設(shè)計原則與設(shè)計思想全面整合,內(nèi)容為先技術(shù)先進(jìn)、穩(wěn)定可用標(biāo)準(zhǔn)規(guī)范、服務(wù)共享整體規(guī)劃、分步實施統(tǒng)一設(shè)計、可擴(kuò)展性采集分析系統(tǒng)具有足夠的柔性、彈性和開放性,能夠滿足本校、教育部、陜西省教育廳或其他政府機(jī)構(gòu)的數(shù)據(jù)需求變遷。按照西安歐亞學(xué)院信息化規(guī)劃統(tǒng)一設(shè)計系統(tǒng)結(jié)構(gòu),特別是多路業(yè)務(wù)數(shù)據(jù)源獲取方式、數(shù)據(jù)模型結(jié)構(gòu)、數(shù)據(jù)存儲結(jié)構(gòu)以及系統(tǒng)擴(kuò)展規(guī)劃等內(nèi)容,從規(guī)劃的全局出發(fā)、從長遠(yuǎn)的角度考慮。業(yè)務(wù)數(shù)據(jù)整合系統(tǒng)設(shè)計要考慮到業(yè)務(wù)未來發(fā)展的需要,盡可能設(shè)計的簡明,降低各功能模塊耦合度,并充分考慮兼容性。系統(tǒng)能夠支持對多種格式數(shù)據(jù)的存儲??煽堪踩?、成熟標(biāo)準(zhǔn)系統(tǒng)最終用戶范圍廣,包括各個層級的人員,系統(tǒng)設(shè)計和數(shù)據(jù)架構(gòu)設(shè)計中充分考慮系統(tǒng)數(shù)據(jù)、權(quán)限、訪問壓力等的安全和可靠。項目需求理解需求梳理歐亞學(xué)院對項目提出了6項業(yè)務(wù)需求,包括:1.基本數(shù)據(jù)庫要求;2.數(shù)據(jù)采集過程管理;3.教學(xué)評估功能要求;4.統(tǒng)計分析功能;5.報表功能要求;6.課堂數(shù)據(jù)采集系統(tǒng)。梳理這些業(yè)務(wù)需求,把業(yè)務(wù)需求轉(zhuǎn)化為產(chǎn)品的功能需求,可以劃分為數(shù)據(jù)采集、數(shù)據(jù)分析、系統(tǒng)管理三類需求:功能需求需求子項目說明數(shù)據(jù)采集1.本科教學(xué)基本狀態(tài)數(shù)據(jù)庫教育部評估中心要求的教學(xué)基本狀態(tài)數(shù)據(jù),包含70張表單。2.高基報表教育部要求的高基報表,包含35張表單;高基表的生成可基于教學(xué)狀態(tài)數(shù)據(jù)庫。3.本科專業(yè)評估專業(yè)評估相關(guān)表單;專家網(wǎng)上評價4.二級學(xué)院評估二級學(xué)院評估相關(guān)表單;5.課堂數(shù)據(jù)采集1.數(shù)據(jù)對接教務(wù)系統(tǒng)、學(xué)校公共數(shù)據(jù)平臺2.聽評課結(jié)果錄入6.其它擴(kuò)展性模塊并能根據(jù)教育部、省教育廳的要求和高等教育形勢的發(fā)展增加新的模塊。7.采集過程管理任務(wù)分解、監(jiān)控進(jìn)度數(shù)據(jù)分析1.報表功能報表展示、報表設(shè)計,及多種圖表設(shè)計功能2.數(shù)據(jù)對比不同數(shù)據(jù)源的比對、年度對比、不同表格的對比3.指標(biāo)分析計算標(biāo)準(zhǔn)指標(biāo)和個性化指標(biāo);4.量化評分專業(yè)打分、二級學(xué)院打分、職能部門打分專家在線打分5.課堂數(shù)據(jù)分析聽評課相關(guān)的統(tǒng)計報表6.數(shù)據(jù)報告按照模板生成國家、省最新本科質(zhì)量報告系統(tǒng)管理類功能1.用戶和權(quán)限管理專家用戶管理2.指標(biāo)管理指標(biāo)維護(hù),按指標(biāo)類型分別設(shè)置指標(biāo)內(nèi)容,分值和評分等級;3.基礎(chǔ)數(shù)據(jù)配置設(shè)置聽評課時間4.視頻監(jiān)控系統(tǒng)對接遠(yuǎn)程聽課數(shù)據(jù)范圍數(shù)據(jù)是分析系統(tǒng)的關(guān)鍵,項目整合的數(shù)據(jù)范圍包括上報數(shù)據(jù)、校內(nèi)數(shù)據(jù)和外部數(shù)據(jù)。上報數(shù)據(jù):包括教學(xué)基本狀態(tài)數(shù)據(jù)和高基報表數(shù)據(jù),教學(xué)狀態(tài)數(shù)據(jù)包括7大類數(shù)據(jù)70張表格,包含學(xué)校基本信息、學(xué)校基本條件、學(xué)科專業(yè)、教師信息、人才培養(yǎng)、學(xué)生信息、教學(xué)管理與質(zhì)量監(jiān)控。校內(nèi)數(shù)據(jù):對接西安歐亞學(xué)院的教務(wù)系統(tǒng)、學(xué)校公共數(shù)據(jù)平臺,獲得課程、教職工等基礎(chǔ)數(shù)據(jù);根據(jù)分析的需求,還需要財務(wù)、教務(wù)、教材、人事、科研、學(xué)生、招生、就業(yè)、校友等業(yè)務(wù)系統(tǒng)的數(shù)據(jù)。外部數(shù)據(jù):由教育部或其他公開渠道發(fā)布的其他高校的指標(biāo)類數(shù)據(jù)。用于橫向?qū)Ρ确治?。需求的實現(xiàn)方案思邁特公司已經(jīng)具有兩個成熟產(chǎn)品:1.高校教學(xué)基本狀態(tài)數(shù)據(jù)庫系統(tǒng)(校級版)、2.Smartbi數(shù)據(jù)分析平臺,這兩個產(chǎn)品已經(jīng)能夠覆蓋了西安歐亞學(xué)院的大多數(shù)需求,并且基于現(xiàn)有產(chǎn)品進(jìn)行項目實施,可以快速滿足一部分需求,另外的需求需要進(jìn)行少量定制開發(fā)。為了有效的整合數(shù)據(jù),思邁特會按照數(shù)據(jù)倉庫的建設(shè)方法,專門建立教學(xué)評估的數(shù)據(jù)集市。本解決方案的特點與優(yōu)勢產(chǎn)品優(yōu)勢--高校教學(xué)基本狀態(tài)數(shù)據(jù)庫系統(tǒng)(校級版)思邁特公司是教育部合作軟件開發(fā)商,全國高校教學(xué)基本狀態(tài)數(shù)據(jù)庫(部級版)即思邁特公司和中山大學(xué)聯(lián)合開發(fā)。系統(tǒng)在設(shè)計之初就考慮到填報表單版本的常態(tài)變遷,具有良好的柔性、彈性和開放性。高校教學(xué)基本狀態(tài)數(shù)據(jù)庫系統(tǒng)(校級版)是思邁特自主開發(fā)的產(chǎn)品,能夠更好地滿足各高校的填報及審核需求。本產(chǎn)品:包含部級版的全部校級功能:包括數(shù)據(jù)填報/審核/基本分析等。更好地滿足各高校的填報及審核需求:隨時填報:可在部級版開放填報窗口之前準(zhǔn)備數(shù)據(jù);填報表單同步:與部級版表單保持同步更新。分析報告同步:校級版可以隨時生成《教學(xué)狀態(tài)數(shù)據(jù)分析報告》,指標(biāo)口徑及內(nèi)涵與部級版完全一致。一鍵上傳:校級版的數(shù)據(jù)可以一鍵上傳到部級版系統(tǒng),不需要重新錄入。產(chǎn)品還可以滿足教育部《高等學(xué)?;厩闆r統(tǒng)計表》的填報要求,通過自定義表單、自定義審核流程,快速完成實施。產(chǎn)品具有Word分析報告的功能,可以按照教育部要求上報的《教學(xué)質(zhì)量報告》等文檔的要求收集數(shù)據(jù),并能一鍵生成《教學(xué)質(zhì)量報告》等教育部要求上報的文檔。平臺優(yōu)勢--Smartbi數(shù)據(jù)分析平臺思邁特公司將使用自有產(chǎn)品Smartbi完成“數(shù)據(jù)采集分析系統(tǒng)”的前端展示工作。Smartbi是國內(nèi)領(lǐng)先的企業(yè)級商業(yè)智能應(yīng)用平臺,已經(jīng)過多年的持續(xù)發(fā)展,產(chǎn)品既采納了國際先進(jìn)的技術(shù)和理念,又凝聚國內(nèi)本土客戶的最佳實踐經(jīng)驗,整合了各行業(yè)的數(shù)據(jù)分析和決策支持的需求;提供一整套滿足用戶需求的數(shù)據(jù)分析、報表、績效監(jiān)控和信息發(fā)布的解決方案;增強(qiáng)企業(yè)的洞察能力、盈利能力,為企業(yè)獲得可持續(xù)的競爭優(yōu)勢提供強(qiáng)大的保障。Smartbi具有領(lǐng)導(dǎo)決策儀表盤、自助查詢與分析、電子表格、多維分析、移動BI、Office分析報告、數(shù)據(jù)采集、數(shù)據(jù)挖掘、ETL與數(shù)據(jù)調(diào)度等功能模塊,適用于領(lǐng)導(dǎo)KPI分析、財務(wù)分析、銷售分析、市場分析、生產(chǎn)分析、供應(yīng)鏈分析、風(fēng)險分析、質(zhì)量分析、客戶細(xì)分、精準(zhǔn)營銷、業(yè)務(wù)流程等多個業(yè)務(wù)領(lǐng)域。Smartbi客戶眾多,廣泛應(yīng)用于金融(銀行、保險、證券)、企業(yè)(電信、電力、制造業(yè)、零售流通等)、政府及公共管理部門(教育、稅務(wù)、工商、財政、氣象、人口與衛(wèi)生、國土、社保等)眾多行業(yè)。Smartbi具有全面的數(shù)據(jù)分析功能(如OLAP、信息查詢和報表生成能力、數(shù)據(jù)可視化能力),產(chǎn)品支持復(fù)雜中國式報表。經(jīng)驗優(yōu)勢—為教育部及20多所高校實施類似項目思邁特公司作為教育部評估中心的合作軟件開發(fā)商,開發(fā)了全國高校教學(xué)基本狀態(tài)數(shù)據(jù)庫(部級版),并且為20多所本科院校實施了本科教學(xué)基本狀態(tài)數(shù)據(jù)庫系統(tǒng)(校級版)和數(shù)據(jù)分析系統(tǒng)。院校名錄如下:除了教育行業(yè)之外,思邁特作為國內(nèi)商業(yè)智能行業(yè)的領(lǐng)導(dǎo)廠商,為眾多行業(yè)提供數(shù)據(jù)分析類產(chǎn)品和服務(wù),累計了豐富的經(jīng)驗,涉及的行業(yè)包括金融與電信(銀行、保險、證券、電信)、能源與制造業(yè)(電力、汽車、制藥等)、政府及公共事業(yè)單位(教育、稅務(wù)、工商、財政、氣象、衛(wèi)生、國土、社保等)和商業(yè)與地產(chǎn)(航空、支付、傳媒、物流、零售、地產(chǎn))。

技術(shù)應(yīng)答本章節(jié)應(yīng)答招標(biāo)書第三章“采購內(nèi)容及要求”中的“項目建設(shè)需求及技術(shù)服務(wù)需求”。項目業(yè)務(wù)需求主要模塊及功能要求:1)基本數(shù)據(jù)庫要求為實現(xiàn)與政府部門數(shù)據(jù)對接,數(shù)據(jù)庫至少應(yīng)包含學(xué)校本科教學(xué)基本狀態(tài)數(shù)據(jù)庫、高基報表、本科教學(xué)質(zhì)量報告、本科教學(xué)審核評估、本科專業(yè)評估、二級學(xué)院評估、聽評課及其它擴(kuò)展性模塊,并能根據(jù)教育部、省教育廳的要求和高等教育形勢的發(fā)展增加新的模塊。應(yīng)按照2015年國家、省最新本科質(zhì)量報告要求將狀態(tài)基礎(chǔ)數(shù)據(jù)進(jìn)行分類,如:定位與目標(biāo)、師資隊伍、教學(xué)資源、培養(yǎng)過程、學(xué)生發(fā)展、質(zhì)量保障、自選特色等,并能隨著發(fā)展而方便地新增、修改、刪除類別,以滿足系統(tǒng)靈活多變的需求。每個數(shù)據(jù)分類下可以自由創(chuàng)建各類數(shù)據(jù)表,表格中字段、錄入、顯示都可以方便、良好地顯示與建立,可按部門設(shè)置字段權(quán)限,并對字段設(shè)置數(shù)據(jù)字典。用戶可自定義建表,系統(tǒng)能自動生成相關(guān)數(shù)據(jù)操作:新增、修改、刪除、導(dǎo)入、導(dǎo)出、查詢功能;系統(tǒng)可在線填報,Excel模板導(dǎo)入,數(shù)據(jù)能同步更新。應(yīng)答:完全滿足。思邁特教學(xué)狀態(tài)數(shù)據(jù)庫系統(tǒng)已包含本科教學(xué)基本狀態(tài)數(shù)據(jù)庫、高基報表、本科教學(xué)質(zhì)量報告、本科教學(xué)審核評估,這些評估項目是教育部規(guī)定的,所有高校都使用一套表單;本科專業(yè)評估、二級學(xué)院評估具有一定的個性化,各高校的評估表單不盡相同,思邁特可以在既有基礎(chǔ)上根據(jù)歐亞學(xué)院的表單進(jìn)行調(diào)整;聽評課模塊是歐亞學(xué)院的獨特需求,可以在系統(tǒng)中快速開發(fā)。圖:產(chǎn)品登錄界面圖:包含教育部要求的7類數(shù)據(jù)70張表單系統(tǒng)具有動態(tài)表單功能,每個數(shù)據(jù)分類下可以自由創(chuàng)建各類數(shù)據(jù)表,表格中字段、錄入、顯示都可以方便、良好地顯示與建立。2)數(shù)據(jù)采集過程管理通過系統(tǒng)可以發(fā)布采集任務(wù),實現(xiàn)多級任務(wù)分解,并能實時監(jiān)控采集進(jìn)度。應(yīng)答:完全滿足。思邁特教學(xué)狀態(tài)數(shù)據(jù)庫系統(tǒng)可以發(fā)布采集任務(wù)、分解任務(wù),并監(jiān)控進(jìn)度。圖:進(jìn)度監(jiān)控圖:進(jìn)度監(jiān)控3)教學(xué)評估功能要求本科教學(xué)審核評估模塊設(shè)計中,能根據(jù)教育部狀態(tài)庫要求導(dǎo)出上報數(shù)據(jù),能夠展示各審核項目及支撐材料、支撐數(shù)據(jù);能根據(jù)模板自動生成自評報告中客觀數(shù)據(jù)和數(shù)據(jù)分析報告。根據(jù)陜西省教育廳對省屬高校本科教學(xué)工作審核評估指標(biāo)的修改增添相關(guān)欄目并實現(xiàn)以上提及的所有功能。本科教學(xué)質(zhì)量報告模塊設(shè)計中,能根據(jù)本科教學(xué)質(zhì)量報告要求的指標(biāo)制作質(zhì)量報告的指標(biāo),并定制質(zhì)量報告模板,在模板中可以插入和動態(tài)顯示指標(biāo)內(nèi)容,從而生成本科質(zhì)量報告文件。應(yīng)答:完全滿足。思邁特教學(xué)狀態(tài)數(shù)據(jù)庫系統(tǒng)可以一鍵導(dǎo)出上報數(shù)據(jù),并一鍵上傳到教育部的平臺(其它廠商不具有此功能)。圖:一鍵導(dǎo)出圖:一鍵導(dǎo)入產(chǎn)品可以根據(jù)模板自動生成自評報告中客觀數(shù)據(jù)和數(shù)據(jù)分析報告。圖:分析報告內(nèi)容專業(yè)評估模塊設(shè)計中,一級指標(biāo)、二級指標(biāo)和觀察點符合國家專業(yè)評估的要求,能方便專家通過系統(tǒng)進(jìn)行網(wǎng)上評審。(1)專家網(wǎng)上評價對培養(yǎng)方案、核心課程、專業(yè)發(fā)展?jié)摿Φ瓤梢灾饔^評價和客觀評價相結(jié)合。邀請校內(nèi)外專家,針對專業(yè)培養(yǎng)方案和核心課程等,對照量表進(jìn)行評分,并提出具體建議。(2)數(shù)據(jù)統(tǒng)計與計分評估采用量化評分的原則,通過對定量指標(biāo)采取按照客觀數(shù)據(jù)直接計分、排序計分、分段計分、分類計分等方式,獲得標(biāo)準(zhǔn)分?jǐn)?shù)。對培養(yǎng)方案、核心課程、發(fā)展?jié)摿Φ榷ㄐ灾笜?biāo),通過設(shè)計形容詞—數(shù)字式量表,由校內(nèi)外專家根據(jù)內(nèi)容按照量表進(jìn)行評分,獲得相對客觀的標(biāo)準(zhǔn)數(shù)據(jù)。專家可以登錄系統(tǒng)進(jìn)行在線對所評專業(yè)進(jìn)行打分,填寫意見,包括:a.專家用戶管理b.專家在線打分系統(tǒng),系統(tǒng)在專家打分時能根據(jù)觀測點自動顯示相關(guān)支撐材料c.專家打分情況及結(jié)果查看根據(jù)學(xué)校實際情況實現(xiàn)二級學(xué)院評估和績效考核。(1)從教學(xué)基本狀態(tài)數(shù)據(jù)庫系統(tǒng)自動抽取數(shù)據(jù);(2)評估專家可進(jìn)入系統(tǒng)進(jìn)行自評報告評審;(3)系統(tǒng)計算各學(xué)院得分,生成總分表;(4)可以統(tǒng)計、匯總、分析各指標(biāo)數(shù)據(jù)得分情況。根據(jù)學(xué)校實際情況實現(xiàn)職能部門評估和績效考核。(1)可以從數(shù)據(jù)庫系統(tǒng)提取關(guān)鍵統(tǒng)計數(shù)據(jù);(2)可以統(tǒng)計、匯總、分析職能部門指標(biāo)數(shù)據(jù)得分情況;(3)可以對歷年數(shù)據(jù)進(jìn)行比較分析。應(yīng)答:完全滿足。思邁特教學(xué)狀態(tài)數(shù)據(jù)庫系統(tǒng)已包含專業(yè)評估的內(nèi)容,根據(jù)歐亞學(xué)院的實際情況進(jìn)行調(diào)整。圖:專業(yè)評估標(biāo)準(zhǔn)圖:專業(yè)評估表單圖:專業(yè)評估報告4)統(tǒng)計分析功能具有對基礎(chǔ)數(shù)據(jù)進(jìn)行篩選校對的功能,對不同來源的數(shù)據(jù)提供比對并提供相應(yīng)比對清單,具有不同年度間的對比,不同表格間的對比。能按要求對基礎(chǔ)數(shù)據(jù)完成標(biāo)準(zhǔn)指標(biāo)和學(xué)校個性化要求指標(biāo)的數(shù)據(jù)調(diào)用、統(tǒng)計與計算??勺远x指標(biāo)并進(jìn)行分析和管理,建立指標(biāo)值與支撐數(shù)據(jù)之間的關(guān)聯(lián),指標(biāo)值能與實時運(yùn)算動態(tài)互動。能從整體上對所有指標(biāo)結(jié)果進(jìn)行評估,列舉不符合標(biāo)準(zhǔn)的項進(jìn)行提示,結(jié)合歷年的指標(biāo)結(jié)果進(jìn)行比對參考,提供互動平臺進(jìn)行指標(biāo)評估及計劃任務(wù)部署,為決策提供數(shù)據(jù)參考。在服務(wù)期間,需提供其他同類院校質(zhì)量報告支撐數(shù)據(jù)統(tǒng)計以及其他評估資料、信息咨詢的服務(wù)。應(yīng)答:完全滿足。思邁特數(shù)據(jù)分析平臺(SmartbiV3.0)是專業(yè)的商業(yè)智能產(chǎn)品,具有強(qiáng)大的統(tǒng)計分析功能。產(chǎn)品預(yù)置了專業(yè)分析、師資分析、KPI檢測預(yù)警等分析內(nèi)容。圖:數(shù)據(jù)對比圖:指標(biāo)監(jiān)控5)報表功能要求具有報表展示、報表設(shè)計,及多種圖表設(shè)計功能,具有在線設(shè)計及儀表盤展示功能,可按照校級、院級來展示相關(guān)指標(biāo)圖表,如:師生比、歷年數(shù)據(jù)趨勢分析等。圖表可以逐層挖掘直至明細(xì)數(shù)據(jù);可以使用已有指標(biāo)添加制作圖表,并放置到儀表盤上;圖表可以導(dǎo)出使用,并能根據(jù)需要自動引入到申報材料中并與系統(tǒng)中指標(biāo)值同步。支持生成Word,Excel等格式報告文檔、預(yù)測分析報表,報告中的關(guān)鍵指標(biāo)與系統(tǒng)指標(biāo)同步,能滿足教育部、省教育廳對本科質(zhì)量報告的申報材料要求。高基報表的生成應(yīng)基于教學(xué)基本狀態(tài)數(shù)據(jù)庫;可基于高基報表數(shù)據(jù)生成主題分析。應(yīng)答:完全滿足。思邁特數(shù)據(jù)分析平臺(SmartbiV3.0)是專業(yè)的商業(yè)智能產(chǎn)品,具有強(qiáng)大的報表設(shè)計、報表展示功能。圖:指標(biāo)監(jiān)控圖:明細(xì)查詢數(shù)據(jù)圖:儀表盤展示6)課堂數(shù)據(jù)采集系統(tǒng)系統(tǒng)需要有完整的用戶和權(quán)限體系,用戶定義系統(tǒng)中各崗位職責(zé),權(quán)限體系設(shè)計要簡單易用,便于用戶自行進(jìn)行配置;提供聽評課的信息查詢和分類統(tǒng)計功能。能實現(xiàn)聽評課指標(biāo)的規(guī)范化管理;對學(xué)校聽評課的過程進(jìn)行管理;對學(xué)校聽評課的效果進(jìn)行全方位的分析等。(1)數(shù)據(jù)管理系統(tǒng)需要和教務(wù)系統(tǒng)、學(xué)校公共數(shù)據(jù)平臺對接,獲得課程、教職工等基礎(chǔ)數(shù)據(jù);若無系統(tǒng)數(shù)據(jù)源,需提供excel表格導(dǎo)入功能。(2)用戶和權(quán)限體系系統(tǒng)需要有完整的用戶和權(quán)限體系,用戶定義系統(tǒng)中各崗位職責(zé):教師(同行)學(xué)院領(lǐng)導(dǎo)學(xué)院督導(dǎo)校領(lǐng)導(dǎo)校督導(dǎo)系統(tǒng)管理員權(quán)限體系設(shè)計要簡單易用,便于用戶自行進(jìn)行配置;(3)課堂信息管理a.聽評課指標(biāo)管理指標(biāo)維護(hù),按指標(biāo)類型分別設(shè)置指標(biāo)內(nèi)容,分值和評分等級;b.聽評課課程管理全校領(lǐng)導(dǎo)、督導(dǎo)和教師可以篩選當(dāng)前學(xué)期開課,作為待聽評課名單,并設(shè)置和規(guī)劃聽評課時間;c.聽評課結(jié)果錄入管理全校領(lǐng)導(dǎo)、督導(dǎo)和教師根據(jù)聽評課篩選的待聽評課名單,按照日期進(jìn)行聽課,并在系統(tǒng)中評分及建議;同時系統(tǒng)提供打印空的課堂觀測表;被聽課教師可以查看評分及評語,(直接向被聽課教師郵箱推送聽評課結(jié)果),但系統(tǒng)自動隱藏評分人信息;d.遠(yuǎn)程聽評課與學(xué)?,F(xiàn)有的教室內(nèi)視頻監(jiān)控系統(tǒng)對接,實現(xiàn)根據(jù)待聽評課名單,實時調(diào)用相應(yīng)的課堂監(jiān)控,實現(xiàn)遠(yuǎn)程查課。e.教學(xué)改進(jìn)被聽課教師可以查看評分及評語,但系統(tǒng)自動隱藏評分人信息;教師可以根據(jù)評語進(jìn)行教學(xué)改進(jìn)。(4)課堂數(shù)據(jù)分析a.提供聽評課的信息查詢和分類統(tǒng)計功能等;b.統(tǒng)計某一位教師被聽課次數(shù)及課程數(shù),按教師姓名/工號,時間段查詢;c.統(tǒng)計各學(xué)院聽課次數(shù),被聽課教師人數(shù)和被聽課課程數(shù),可按學(xué)院,時間段查詢,默認(rèn)顯示全校的;d.統(tǒng)計某一位聽課人聽課次數(shù)、教師人數(shù)及課程數(shù),可按聽課人姓名/工號,時間段查詢;e.統(tǒng)計教師聽課成績平均分及排名,可按學(xué)校,學(xué)院,教師姓名/工號,時間段進(jìn)行查詢;f.統(tǒng)計被聽課程成績平均分,可按課程編號/名稱,時間段查詢;g.統(tǒng)計同一門課程不同任課教師聽課結(jié)果排名,按課程編號/名稱,時間段查詢;h.統(tǒng)計其中任意觀測點所有被聽課教師的分值。應(yīng)答:完全滿足。課堂數(shù)據(jù)采集系統(tǒng)是歐亞學(xué)院的個性化需求,思邁特需要在系統(tǒng)中添加相關(guān)表單、分析功能,整合相關(guān)數(shù)據(jù)源。思邁特的產(chǎn)品是一個開放的平臺,能夠快速實現(xiàn)課堂數(shù)據(jù)采集需求。Smartbi具有完善的安全管理體系,它可以控制用戶功能權(quán)限、數(shù)據(jù)訪問權(quán)限、資源訪問權(quán)限。支持按用戶、用戶組、角色進(jìn)行管理;支持多套應(yīng)用系統(tǒng)共用同一套用戶管理系統(tǒng);支持多級用戶管理體系。權(quán)限分類如下。圖:用戶管理界面圖:設(shè)計聽評課表單技術(shù)及服務(wù)需求1)技術(shù)要求系統(tǒng)須采用B/S結(jié)構(gòu),可運(yùn)行于Unix、Linux、windows等高安全性操作系統(tǒng)。開發(fā)技術(shù)應(yīng)采用J2EE標(biāo)準(zhǔn)、組件技術(shù)及在數(shù)據(jù)交換上對XML的支持,使系統(tǒng)功能最優(yōu)化,同時將整體系統(tǒng)內(nèi)部在技術(shù)上的相互依賴性減至最低。具體要求如下:a.平臺及應(yīng)用系統(tǒng)軟件必須遵循J2EE的技術(shù)路線,采用Java編程語言和服務(wù)器端Java技術(shù)進(jìn)行開發(fā),業(yè)務(wù)應(yīng)用和數(shù)據(jù)集成須基于oracle10g及以上大型數(shù)據(jù)庫上。b.采用面向?qū)ο蟮慕M件技術(shù),著重于開發(fā)構(gòu)成應(yīng)用程序“業(yè)務(wù)對象”的可重復(fù)使用的組件,利用這些組件順利地建立分布式應(yīng)用程序。c.應(yīng)用程序開發(fā)與運(yùn)行結(jié)構(gòu)要基于統(tǒng)一的技術(shù)開發(fā)平臺的三層架構(gòu),即Web服務(wù)器、應(yīng)用支撐服務(wù)器和數(shù)據(jù)庫服務(wù)器。d.能完成跨業(yè)務(wù)部門的業(yè)務(wù)流程和相對應(yīng)的細(xì)顆粒度的分級授權(quán)體系。e.系統(tǒng)要充分利用現(xiàn)有先進(jìn)技術(shù)手段,采用相同的體系結(jié)構(gòu)和運(yùn)行平臺,基于多層架構(gòu)和組件技術(shù),進(jìn)行構(gòu)建,做到系統(tǒng)結(jié)構(gòu)層次清晰。所有應(yīng)用邏輯、流程、數(shù)據(jù)等都應(yīng)當(dāng)能夠根據(jù)招標(biāo)方要求的顆粒度進(jìn)行封裝。應(yīng)答:完全滿足。平臺部署:

思邁特產(chǎn)品基于J2EE架構(gòu),具有平臺獨立性特點。服務(wù)器支持部署在主流操作系統(tǒng)(如UNIX、Linux、Windows、Aix、Solaris等),支持在32位或64位服務(wù)器上部署。支持在不同系統(tǒng)間移植。應(yīng)用部署:

思邁特產(chǎn)品基于J2EE架構(gòu),具有平臺獨立性特點。支持在多種應(yīng)用服務(wù)器部署,包括:國外中間件:WebSphere/WebLogic/Tomcat/Jboss國內(nèi)中間件:金蝶中間件、山東中創(chuàng)中間件、東方通中間件等支持多瀏覽器:

思邁特產(chǎn)品支持使用業(yè)內(nèi)常用的瀏覽器如IE、360、Chrome(谷歌瀏覽器)、Firefox、Safari等來瀏覽資源。注:由于定制資源比較復(fù)雜,故只支持使用基于IE內(nèi)核的瀏覽器來進(jìn)行相關(guān)資源的管理和定制。包括:IE6、IE7、IE8、IE9、IE10、IE11、遨游、騰訊等瀏覽器;其中IE8瀏覽速度比IE6要快許多。關(guān)系數(shù)據(jù)庫:

思邁特具有優(yōu)秀的開放性,支持國內(nèi)外主流的關(guān)系型數(shù)據(jù)庫,包括:國外數(shù)據(jù)庫:Oracle、DB2、Teradata、SQLServer、Sybase、Informix、Mysql、PostgreSQL、Greenplum、Netezza國產(chǎn)數(shù)據(jù)庫:金倉數(shù)據(jù)庫KingbaseES、南大通用Gbase、達(dá)夢數(shù)據(jù)庫DM2)系統(tǒng)安全要求a.認(rèn)證授權(quán):保證用戶的合法性和用戶使用應(yīng)用信息資源的權(quán)力,避免內(nèi)部敏感信息泄漏和服務(wù)所提供的信息資源被非法訪問,造成嚴(yán)重的安全事件。b.信息保密:充分利用密碼技術(shù),對于需要保密的信息,采用密碼技術(shù)進(jìn)行加解密處理,防止信息的非授權(quán)泄漏,確保涉密信息在產(chǎn)生、存儲、傳遞和處理過程中的保密。c.數(shù)據(jù)完整性:建立數(shù)據(jù)完整性檢驗機(jī)制,保證收發(fā)雙方數(shù)據(jù)的一致性,防止信息被非授權(quán)修改。d.審計:記錄應(yīng)用日志,對事件進(jìn)行分析,并能提供預(yù)警信息。e.數(shù)據(jù)備份:利用數(shù)據(jù)庫的備份功能將建設(shè)的平臺和系統(tǒng)數(shù)據(jù)備份到指定的服務(wù)器或存儲系統(tǒng)上。f.要求投標(biāo)方需從物理安全、網(wǎng)絡(luò)安全、系統(tǒng)安全、應(yīng)用軟件安全、用戶安全、數(shù)據(jù)安全等幾個方面提出配套的安全體系完善方案,以便防范安全風(fēng)險。應(yīng)答:完全滿足。思邁特產(chǎn)品具有晚上的安全保障體系,包括物理安全、網(wǎng)絡(luò)安全、系統(tǒng)安全、應(yīng)用程序安全、數(shù)據(jù)資源安全和安全認(rèn)證,從安全技術(shù)和安全管理機(jī)制兩個方面為系統(tǒng)提供安全保障。3)售后服務(wù)要求安裝要求:按照校方要求,在合同生效15個工作日內(nèi),完成系統(tǒng)部署安裝,數(shù)據(jù)接口的免費(fèi)對接,達(dá)到驗收要求。如未達(dá)到驗收要求,則合同自動終止。系統(tǒng)故障響應(yīng)時效:公司應(yīng)在當(dāng)?shù)赜修k事處或分公司,方便及時有效的解決問題,通過上門服務(wù)與網(wǎng)絡(luò)在線服務(wù)結(jié)合,及時解決該軟件的各種問題。熱線服務(wù)和遠(yuǎn)程在線要求1小時內(nèi)響應(yīng),4小時內(nèi)解決問題;熱線服務(wù)和遠(yuǎn)程在線都無法解決的重大問題能夠上門服務(wù),2個工作日到達(dá)現(xiàn)場,并在到達(dá)后的24小時內(nèi)有效解決問題。培訓(xùn):首次安裝完成后,免費(fèi)提供面向管理員、操作人員的上門操作培訓(xùn),培訓(xùn)時間不少于3個工作日。質(zhì)保期內(nèi)提供系統(tǒng)bug維護(hù),系統(tǒng)免費(fèi)升級服務(wù)。具體服務(wù)條款以合同約定為準(zhǔn)。應(yīng)答:完全滿足。思邁特的產(chǎn)品--高校教學(xué)基本狀態(tài)數(shù)據(jù)庫系統(tǒng)(校級版)和.Smartbi數(shù)據(jù)分析平臺)均為成熟產(chǎn)品,能夠在15個工作日內(nèi)完成部署安裝,達(dá)到驗收要求。思邁特公司在西安設(shè)立辦事處,能夠及時解決問題,提供完善的售后服務(wù)。提供不少于3工作日的培訓(xùn),質(zhì)保期內(nèi)免費(fèi)bug維護(hù)、系統(tǒng)升級服務(wù)。其它要求1、投標(biāo)人需具有相關(guān)產(chǎn)品的軟件著作權(quán);近三年至少為五個不同本科院校提供本次招標(biāo)采購類似服務(wù)的業(yè)績;應(yīng)答:完全滿足。思邁特的產(chǎn)品均具有軟件著作權(quán),已為20多所本科院校提供類似的產(chǎn)品及服務(wù)。2、投標(biāo)人須自行攜帶計算機(jī)用于產(chǎn)品介紹和真實環(huán)境演示。應(yīng)答:完全滿足?,F(xiàn)場進(jìn)行產(chǎn)品演示。

系統(tǒng)總體方案總體設(shè)計目標(biāo)西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)的建設(shè),結(jié)合國內(nèi)外的最佳實踐經(jīng)驗,設(shè)計靈活的、可擴(kuò)展的、切合西安歐亞學(xué)院現(xiàn)狀,以成熟的數(shù)據(jù)模型、具實踐經(jīng)驗的實施方法論,保證項目的順利上線投產(chǎn)。根據(jù)系統(tǒng)戰(zhàn)略遠(yuǎn)景,以業(yè)務(wù)需求為基礎(chǔ),對業(yè)務(wù)系統(tǒng)進(jìn)行定義、分析和設(shè)計,明確系統(tǒng)的外部環(huán)境,確定系統(tǒng)的業(yè)務(wù)處理方式和總體結(jié)構(gòu)。制定系統(tǒng)建設(shè)的總體計劃,提出確實可行的技術(shù)解決方案、項目實施方案和系統(tǒng)運(yùn)行管理方案,為系統(tǒng)實施提供統(tǒng)一的規(guī)范和標(biāo)準(zhǔn)及建設(shè)和設(shè)計的指南,便于項目整體協(xié)調(diào)和管理,確保各個應(yīng)用系統(tǒng)能有效銜接,構(gòu)成有機(jī)統(tǒng)一、完整的綜合信息系統(tǒng),確保系統(tǒng)建設(shè)達(dá)到預(yù)期目標(biāo)。系統(tǒng)邏輯架構(gòu)西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)的建設(shè),以數(shù)據(jù)倉庫系統(tǒng)建設(shè)方法論為指導(dǎo),以數(shù)據(jù)倉庫技術(shù)體系為基礎(chǔ)進(jìn)行數(shù)據(jù)架構(gòu)設(shè)計,以ETL技術(shù)為數(shù)據(jù)處理手段,以數(shù)據(jù)治理方法論為指導(dǎo)實現(xiàn)數(shù)據(jù)整合和存儲,以SOA思想、J2EE架構(gòu),結(jié)合各種應(yīng)用展現(xiàn)工具實現(xiàn)數(shù)據(jù)展現(xiàn),以元數(shù)據(jù)管理技術(shù)、主數(shù)據(jù)管理技術(shù)以及安全管理體系等保證數(shù)據(jù)倉庫的安全性和可靠性。本系統(tǒng)的邏輯架構(gòu)設(shè)計參考圖如下:系統(tǒng)邏輯架構(gòu)如上圖所示,系統(tǒng)架構(gòu)邏輯上包括數(shù)據(jù)層、數(shù)據(jù)中心、BI應(yīng)用層、展現(xiàn)層和應(yīng)用層,各個層次分別介紹如下:數(shù)據(jù)源西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)的數(shù)據(jù)源,主要來自于現(xiàn)有系統(tǒng)數(shù)據(jù)以及上報數(shù)據(jù)兩部分?,F(xiàn)有系統(tǒng)如教務(wù)系統(tǒng)、學(xué)生管理系統(tǒng)等,上報數(shù)據(jù)如教育部全國高校教學(xué)基本狀態(tài)數(shù)據(jù)庫數(shù)據(jù)、高基報表數(shù)據(jù)等。數(shù)據(jù)層數(shù)據(jù)層是西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)的數(shù)據(jù)存儲中心,也是各個應(yīng)用模型的數(shù)據(jù)集市。數(shù)據(jù)層的數(shù)據(jù)來源于數(shù)據(jù)源層,通過ETL工具抽取到ODS,再通過加工處理,存儲到數(shù)據(jù)倉庫中。再按不同的主題分析需求,構(gòu)建出各分析主題,存儲到OLAP數(shù)據(jù)庫中。BI應(yīng)用層BI應(yīng)用層主要由前端工具提供相應(yīng)的展示和分析功能,如各類圖形、關(guān)聯(lián)分析參數(shù)傳遞、地圖、預(yù)警告警等功能,為進(jìn)行業(yè)務(wù)分析提供功能支持。展現(xiàn)層展現(xiàn)層是前端工具提供相應(yīng)的信息展示和分析界面,展現(xiàn)層以應(yīng)用為中心,對各種分析主題進(jìn)行界面組合、數(shù)據(jù)信息呈現(xiàn)。應(yīng)用層包括1.基本數(shù)據(jù)庫系統(tǒng);2.數(shù)據(jù)采集過程管理;3.教學(xué)評估功能;4.統(tǒng)計分析功能;5.報表功能;6.課堂數(shù)據(jù)采集系統(tǒng)。系統(tǒng)應(yīng)用架構(gòu)西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)由的應(yīng)用架構(gòu)如上圖所示,利用思邁特Smartbi平臺產(chǎn)品作為基礎(chǔ)支撐平臺,通過即席查詢、多維分析、固定報表、儀表盤分析、地圖分析、數(shù)據(jù)預(yù)警、自助分析、用戶管理、移動應(yīng)用等功能,在這些功能基礎(chǔ)之可以建立滿足西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)的應(yīng)用需求,包括“教學(xué)基本狀態(tài)數(shù)據(jù)庫與質(zhì)量評估系統(tǒng)”、“高等學(xué)校基本情況統(tǒng)計報表填報系統(tǒng)”、“學(xué)校專業(yè)評估分析系統(tǒng)”、“學(xué)校專家評審系統(tǒng)”、“學(xué)校決策支持分析系統(tǒng)”等多種應(yīng)用,并與西安歐亞學(xué)院校園基礎(chǔ)業(yè)務(wù)平臺進(jìn)行集成,將以上應(yīng)用通過統(tǒng)一的展示門戶界面展現(xiàn)給學(xué)校各級用戶,通過用戶權(quán)限管理進(jìn)行權(quán)限范圍內(nèi)的數(shù)據(jù)填報、瀏覽、分析、上報工作。技術(shù)架構(gòu)西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)的建設(shè)中,涉及到關(guān)鍵技術(shù)包括:數(shù)據(jù)倉庫建模技術(shù)、ODS技術(shù)、ETL技術(shù)、元數(shù)據(jù)庫管理技術(shù)、OLAP技術(shù)、BI應(yīng)用層技術(shù)、BI門戶技術(shù)、移動終端展示技術(shù)。其中,數(shù)據(jù)倉庫建模技術(shù)、ODS技術(shù)、ETL技術(shù)、元數(shù)據(jù)庫管理技術(shù)在下面章節(jié)描述,本章重點介紹OLAP技術(shù)、BI應(yīng)用層技術(shù)、BI門戶技術(shù)、移動終端展示技術(shù)。OLAP技術(shù)OLAP是“聯(lián)機(jī)分析處理”的簡稱。OLAP技術(shù)是共享多維信息的、針對特定問題的聯(lián)機(jī)數(shù)據(jù)訪問和分析的快速軟件技術(shù)。它通過對信息的多種可能的觀察形式進(jìn)行快速、穩(wěn)定一致和交互性的存取,允許管理決策人員對數(shù)據(jù)進(jìn)行深入觀察。決策數(shù)據(jù)是多維數(shù)據(jù),多維數(shù)據(jù)就是決策的主要內(nèi)容。OLAP專門設(shè)計用于支持復(fù)雜的分析操作,側(cè)重對決策人員和高層管理人員的決策支持,可以根據(jù)分析人員的要求快速、靈活地進(jìn)行大數(shù)據(jù)量的復(fù)雜查詢處理,并且以一種直觀而易懂的形式將查詢結(jié)果提供給決策人員,以便他們準(zhǔn)確掌握企業(yè)(公司)的經(jīng)營狀況,了解對象的需求,制定正確的方案。聯(lián)機(jī)分析處理具有靈活的分析功能、直觀的數(shù)據(jù)操作和分析結(jié)果可視化表示等突出優(yōu)點,從而使用戶對基于大量復(fù)雜數(shù)據(jù)的分析變得輕松而高效,以利于迅速做出正確判斷。多維概念維度(Dimension):是人們觀察數(shù)據(jù)的特定角度,是考慮問題時的一類屬性,屬性集合構(gòu)成一個維(時間維、地理維等)。維的層次(Level):人們觀察數(shù)據(jù)的某個特定角度(即某個維)還可以存在細(xì)節(jié)程度不同的各個描述方面(時間維:日期、月份、季度、年)。維的成員(Member):維的一個取值,是數(shù)據(jù)項在某維中位置的描述。(“某年某月某日”是在時間維上位置的描述)。度量(Measure):也即指標(biāo)值。存儲技術(shù)OLAP系統(tǒng)按照其存儲器的數(shù)據(jù)存儲格式可以分為關(guān)系OLAP(RelationalOLAP,簡稱ROLAP)、多維OLAP(MultidimensionalOLAP,簡稱MOLAP)和混合型OLAP(HybridOLAP,簡稱HOLAP)三種類型。ROLAPROLAP將分析用的多維數(shù)據(jù)存儲在關(guān)系數(shù)據(jù)庫中并根據(jù)應(yīng)用的需要有選擇的定義一批實視圖作為表也存儲在關(guān)系數(shù)據(jù)庫中。不必要將每一個SQL查詢都作為實視圖保存,只定義那些應(yīng)用頻率比較高、計算工作量比較大的查詢作為實視圖。對每個針對OLAP服務(wù)器的查詢,優(yōu)先利用已經(jīng)計算好的實視圖來生成查詢結(jié)果以提高查詢效率。同時用作ROLAP存儲器的RDBMS也針對OLAP作相應(yīng)的優(yōu)化,比如并行存儲、并行查詢、并行數(shù)據(jù)管理、基于成本的查詢優(yōu)化、位圖索引、SQL的OLAP擴(kuò)展(cube,rollup)等等。MOLAPMOLAP將OLAP分析所用到的多維數(shù)據(jù)物理上存儲為多維數(shù)組的形式,形成“立方體”的結(jié)構(gòu)。維的屬性值被映射成多維數(shù)組的下標(biāo)值或下標(biāo)的范圍,而總結(jié)數(shù)據(jù)作為多維數(shù)組的值存儲在數(shù)組的單元中。由于MOLAP采用了新的存儲結(jié)構(gòu),從物理層實現(xiàn)起,因此又稱為物理OLAP(PhysicalOLAP);而ROLAP主要通過一些軟件工具或中間軟件實現(xiàn),物理層仍采用關(guān)系數(shù)據(jù)庫的存儲結(jié)構(gòu),因此稱為虛擬OLAP(VirtualOLAP)。HOLAP由于MOLAP和ROLAP有著各自的優(yōu)點和缺點(如下表所示),且它們的結(jié)構(gòu)迥然不同,這給分析人員設(shè)計OLAP結(jié)構(gòu)提出了難題。為此一個新的OLAP結(jié)構(gòu)——混合型OLAP(HOLAP)被提出,它能把MOLAP和ROLAP兩種結(jié)構(gòu)的優(yōu)點結(jié)合起來。迄今為止,對HOLAP還沒有一個正式的定義。但很明顯,HOLAP結(jié)構(gòu)不應(yīng)該是MOLAP與ROLAP結(jié)構(gòu)的簡單組合,而是這兩種結(jié)構(gòu)技術(shù)優(yōu)點的有機(jī)結(jié)合,能滿足用戶各種復(fù)雜的分析請求。BI應(yīng)用層技術(shù)BI應(yīng)用層技術(shù)包括了構(gòu)建BI應(yīng)用系統(tǒng)的各種技術(shù)。在決策支持管理系統(tǒng)中,重要的BI中間件技術(shù)包括:多維分析、即席查詢、報表定制、告警監(jiān)控、分析統(tǒng)計、指標(biāo)管理。多維分析多維分析是基于OLAP數(shù)據(jù)庫,從多個維度、不同角度對指標(biāo)數(shù)據(jù)進(jìn)行分析的技術(shù)。多維分析常見的分析操作有鉆?。―rill-up和Drill-down)、切片(Slice)和切塊(Dice)、以及旋轉(zhuǎn)(Pivot)等。鉆?。菏歉淖兙S的層次,變換分析的粒度。它包括向下鉆?。―rill-down)和向上鉆?。―rill-up)/上卷(Roll-up)。Drill-up是在某一維上將低層次的細(xì)節(jié)數(shù)據(jù)概括到高層次的匯總數(shù)據(jù),或者減少維數(shù);而Drill-down則相反,它從匯總數(shù)據(jù)深入到細(xì)節(jié)數(shù)據(jù)進(jìn)行觀察或增加新維。切片和切塊:是在一部分維上選定值后,關(guān)心度量數(shù)據(jù)在剩余維上的分布。如果剩余的維只有兩個,則是切片;如果有三個或以上,則是切塊。旋轉(zhuǎn):是變換維的方向,即在表格中重新安排維的放置(例如行列互換)。即席查詢即席查詢(AdHoc)是用戶根據(jù)自己的需求,靈活的選擇查詢條件,系統(tǒng)能夠根據(jù)用戶的選擇生成相應(yīng)的統(tǒng)計報表。即席查詢與普通應(yīng)用查詢最大的不同是普通的應(yīng)用查詢是定制開發(fā)的,而即席查詢是由用戶自定義查詢條件的。報表/報告定制報表定制技術(shù)是為了解決國內(nèi)企業(yè)對特定格式的報表需求,提出的報表制作技術(shù)。國內(nèi)企業(yè)常見的報表,對報表格式要求較高,且報表中信息量較大,常從多個數(shù)據(jù)源中提取或匯總數(shù)據(jù)。報表定制技術(shù)有以下一些要點:制作簡單,技術(shù)門檻底,業(yè)務(wù)人員采用拖拉的方式可以完成報表制作。支持常見的報表格式,包括:交叉統(tǒng)計報表、不規(guī)則報表、不平衡報表、原始憑證報表等。能夠使用函數(shù),常見的函數(shù)包括sum、avg、IIF等支持填報和校驗指標(biāo)告警監(jiān)控根據(jù)業(yè)務(wù)運(yùn)行的狀況,對指標(biāo)的運(yùn)行情況,根據(jù)設(shè)定的閥值進(jìn)行分析,一旦業(yè)務(wù)超過閥值,即進(jìn)行預(yù)警??赏ㄟ^儀表盤、紅綠燈、突出顯示、字體變色、背景變色等多種方式進(jìn)行預(yù)警提示。對于KPI指標(biāo),用實際的值跟計劃值進(jìn)行比較,用紅綠燈來區(qū)分任務(wù)完成的進(jìn)度情況。針對管理者最關(guān)心的核心指標(biāo),通過分析方法獲得預(yù)警狀態(tài)值;本需求對指標(biāo)的預(yù)警狀態(tài)分為三類,紅色:風(fēng)險關(guān)注區(qū)間,黃色:提示預(yù)警區(qū)間,綠色:安全區(qū)間;判斷指標(biāo)的預(yù)警狀態(tài)有兩種方法:根據(jù)完成計劃比的執(zhí)行情況進(jìn)行判斷,如完成計劃比在90%以上為安全,70%-90%為提示,70%以下為風(fēng)險;該區(qū)間根據(jù)不同的指標(biāo)是不同的,而且同一指標(biāo)在不同的時期也可能是不同的;累計的業(yè)務(wù)數(shù)據(jù)與年度計劃進(jìn)行逐步比對:例如新增存款指標(biāo),不能直接用1月的數(shù)據(jù)與年度計劃進(jìn)行比較,而應(yīng)該1月的數(shù)據(jù)與年度計劃的1/12計算完成的百分比,并以次進(jìn)行比對,是在何種預(yù)警區(qū)間色段;而二月份的數(shù)據(jù)與年度計劃的2/12比較完成的百分比進(jìn)行比對,以次類推;具體拆分的方式會根據(jù)指標(biāo)不同以及設(shè)定計劃的方式不同而區(qū)分,只是支持對不同頻度計劃考核方法當(dāng)期數(shù)據(jù)直接與年度計劃進(jìn)行比對:例如不良貸款余額指標(biāo),可以直接用當(dāng)期的數(shù)據(jù)與年度計劃比較,計算完成比,然后判斷在何種預(yù)警區(qū)間色段;展示方式同上,只是預(yù)警區(qū)間段直接按照完成計劃的百分比進(jìn)行的展示方式:儀表盤,指針實際數(shù)據(jù),表盤為計劃數(shù)據(jù)根據(jù)指標(biāo)的預(yù)警閥值進(jìn)行判斷,直接將指標(biāo)的實際余額與設(shè)定的預(yù)警閥值進(jìn)行比較;目前各指標(biāo)的預(yù)警閥值都是參數(shù)的方式設(shè)定三大類別的預(yù)警閥值。展示方式:儀表盤,指針指向?qū)嶋H數(shù)據(jù),并顯示實際數(shù)據(jù)值,并在表盤區(qū)分預(yù)警區(qū)間段;分析統(tǒng)計統(tǒng)計分析是指運(yùn)用統(tǒng)計方法及與分析對象有關(guān)的知識,從定量與定性的結(jié)合上進(jìn)行的研究活動。常見的分析統(tǒng)計方法包括趨勢分析、排名分析、比較分析等。趨勢分析指標(biāo)趨勢分析是以時間序列的形式展示指標(biāo)變動值,進(jìn)行歷史趨勢展開,了解該項指標(biāo)的變化狀況,是在好轉(zhuǎn)還是在惡化,了解各指標(biāo)在歷史時間上的變化趨勢。并且趨勢分析是可以在不同機(jī)構(gòu)維度上展示的。展現(xiàn)方式:以線形圖進(jìn)行展示;默認(rèn)值的時間頻度為指標(biāo)的業(yè)務(wù)分析頻度;即如果指標(biāo)的分析頻度為日,則默認(rèn)顯示一個月內(nèi)的每日數(shù)據(jù)的變化趨勢;如果指標(biāo)的分析頻度為月,則顯示從報告期至11個月前共12個月的指標(biāo)數(shù)據(jù),以月末時點數(shù)據(jù)作為月指標(biāo)數(shù)據(jù)展示;季:如果指標(biāo)的分析頻度為季,則顯示12個季度的指標(biāo)數(shù)據(jù),以季末時點數(shù)據(jù)作為季指標(biāo)數(shù)據(jù)展示;排名分析指標(biāo)排名分析是對于各指標(biāo)能夠看到境內(nèi)一級分行各分支機(jī)構(gòu)的排名情況。展現(xiàn)方式:柱狀圖展現(xiàn),如果該指標(biāo)的屬性為越大越好,則下屬機(jī)構(gòu)數(shù)據(jù)從大到小排列;反之,從小到大排列;或直接展現(xiàn)TOPN比較分析比較分析對于各指標(biāo)能夠看到該指標(biāo)客戶或結(jié)構(gòu)的占比情況;展現(xiàn)方式:餅狀圖展現(xiàn),如圖門戶技術(shù)門戶是一種web應(yīng)用,通常用來提供個性化、單點登錄、聚集各個信息源的內(nèi)容,并作為信息系統(tǒng)表現(xiàn)層的宿主。聚集是指將來自各個信息源的內(nèi)容集成到一個web頁面里的活動Portal的功能可以分為三個主要方面:Portlet容器Portlet容器與servlet容器非常類似,所有的portlet都部署在portlet容器里,portlet容器控制portlet的生命周期并為其提供必要的資源和環(huán)境信息。Portlet容器負(fù)責(zé)初始化和銷毀portlets,向portlets傳送用戶請求并合成響應(yīng)。內(nèi)容聚集Portlet規(guī)范中規(guī)定portal的主要工作之一是聚集由各種portlet應(yīng)用生成的內(nèi)容。公共服務(wù)portlet服務(wù)器的一個強(qiáng)項是它所提供的一套公共服務(wù)。這些服務(wù)并不是portlet規(guī)范所要求的,但portal的商業(yè)實現(xiàn)版本提供了豐富的公共服務(wù)以有別于它們的競爭者。在大部分實現(xiàn)中都有望找到的幾個公共服務(wù)有:單點登錄:只需登錄portal服務(wù)器一次就可以訪問所有其它的應(yīng)用,這意味著你無需再分別登錄每一個應(yīng)用。例如一旦我登錄了我的internet網(wǎng)站,我就能訪問mail應(yīng)用、IM消息應(yīng)用和其它的internet應(yīng)用,不必再分別登錄這些應(yīng)用。個性化:個性化服務(wù)的基本實現(xiàn)使用戶能從兩方面?zhèn)€性化她的頁面:第一,用戶可以根據(jù)她的自身喜好決定標(biāo)題條的顏色和控制圖標(biāo)。第二,用戶可以決定在她的頁面上有哪些portlets。BI移動展示技術(shù)隨著信息化時代的來臨,時間成本對于企業(yè)的重要性也越來越高,在重要時刻的及時反應(yīng)甚至可以幫助企業(yè)獲得更多的回報率,而“移動辦公”也已經(jīng)成為了企業(yè)管理者樂于見到的主流辦公方式。對于BI移動展示技術(shù),有以下一些技術(shù)要點:支持多種移動設(shè)備支持iPad、iPhone、iPodTouch、Android手機(jī)、Android平板等主流的移動設(shè)備,并在每種移動設(shè)備上提供一致的操作體驗。能展示PC上Web端報表將PC終端的統(tǒng)計報表在移動終端上展示,避免重復(fù)制作。豐富多樣的展現(xiàn)方式提供線圖、餅圖、柱狀圖、橫條圖、紅綠燈、地圖等多種豐富的圖形展示形式,并支持圖形在同一儀表盤的集中展現(xiàn)、聯(lián)動分析。圖:展現(xiàn)形式多樣信息的同步與共享可以在報表的任意位置繪制圖形或添加注釋,并可以通過郵件將注釋的內(nèi)容發(fā)送給他人,從而實現(xiàn)信息的同步與共享。圖:發(fā)送郵件支持離線瀏覽為用戶提供離線瀏覽功能,將報表內(nèi)容本地化保存到當(dāng)前IOS設(shè)備上,形成一份或多份離線文件,在沒有網(wǎng)絡(luò)的情況下依然可以通過瀏覽離線文件來獲取報表信息。圖:離線瀏覽

項目技術(shù)方案采集分析系統(tǒng)構(gòu)架和部署本章包括總體架構(gòu)設(shè)計概述、執(zhí)行架構(gòu)、功能組件架構(gòu)、邏輯架構(gòu)、運(yùn)維架構(gòu)、數(shù)據(jù)架構(gòu)、應(yīng)用架構(gòu)、存儲規(guī)劃設(shè)計、災(zāi)備與恢復(fù)等內(nèi)容??傮w架構(gòu)設(shè)計概述總體架構(gòu)的設(shè)計框架西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)的總體架構(gòu)分為基礎(chǔ)技術(shù)架構(gòu)、應(yīng)用架構(gòu)和數(shù)據(jù)架構(gòu)三個核心部分。這三個部分共同組成了西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)。在基礎(chǔ)技術(shù)架構(gòu)中,包括執(zhí)行架構(gòu)、邏輯架構(gòu)、功能組件架構(gòu)和運(yùn)維架構(gòu)四個部分。執(zhí)行架構(gòu)描述系統(tǒng)大的框架和模塊區(qū)域,以及之間的邏輯關(guān)系;是確定生產(chǎn)環(huán)境的建設(shè)要求及指導(dǎo)原則。邏輯架構(gòu)描述數(shù)據(jù)倉庫(EDW)各個模塊之間的數(shù)據(jù)的接口、數(shù)據(jù)流向、工具使用和采用具體的技術(shù)實現(xiàn)手段或方式情況,用于規(guī)范本項目最終生產(chǎn)環(huán)境的建立。邏輯架構(gòu)是建立應(yīng)用架構(gòu)、執(zhí)行架構(gòu)、運(yùn)維架構(gòu)的基礎(chǔ),也是建立執(zhí)行架構(gòu)、應(yīng)用架構(gòu)以及運(yùn)維架構(gòu)的原型系統(tǒng)。功能組件架構(gòu)描述確定系統(tǒng)各個大的組件區(qū)域的功能模塊框架,以及提供的某種服務(wù)類型。運(yùn)維架構(gòu)是描述數(shù)據(jù)倉庫(EDW)項目的運(yùn)維架構(gòu)標(biāo)準(zhǔn),包括運(yùn)維架構(gòu)設(shè)計的內(nèi)容、設(shè)計原則、各構(gòu)成組件的設(shè)計考慮因素、約束、要求等。運(yùn)維架構(gòu)通過相應(yīng)的流程和工具實現(xiàn)對邏輯架構(gòu)、功能組件架構(gòu)、執(zhí)行架構(gòu)、數(shù)據(jù)架構(gòu)以及應(yīng)用架構(gòu)的運(yùn)維和管理。而數(shù)據(jù)架構(gòu)和應(yīng)用架構(gòu)的主要描述:應(yīng)用架構(gòu)是數(shù)據(jù)倉庫(EDW)為滿足業(yè)務(wù)需求所提供的系統(tǒng)應(yīng)用功能及其藍(lán)圖設(shè)計,其中業(yè)務(wù)需求是應(yīng)用架構(gòu)設(shè)計的基礎(chǔ),最終的應(yīng)用架構(gòu)將以應(yīng)用系統(tǒng)的形式體現(xiàn)在執(zhí)行架構(gòu)中,主要包括:應(yīng)用服務(wù)和數(shù)據(jù)服務(wù)。數(shù)據(jù)架構(gòu)描述于數(shù)據(jù)倉庫(EDW)系統(tǒng)相關(guān)的數(shù)據(jù)流動策略,即數(shù)據(jù)在數(shù)據(jù)倉庫(EDW)系統(tǒng)的執(zhí)行架構(gòu)下的抽取、轉(zhuǎn)換、儲存策略以及應(yīng)采用的流程,包括數(shù)據(jù)層次和總之間的數(shù)據(jù)分部情況等。數(shù)據(jù)架構(gòu)是建立執(zhí)行架構(gòu)標(biāo)準(zhǔn)的需求定義。下圖是數(shù)據(jù)倉庫(EDW)項目總體架構(gòu)的框架:總體架構(gòu)的設(shè)計原則總體架構(gòu)在著重考慮實施要求的同時,需要為后續(xù)階段進(jìn)行規(guī)劃,以保證項目最終能夠達(dá)到目標(biāo)架構(gòu)的設(shè)計;總體架構(gòu)的設(shè)計要基于包括西安歐亞學(xué)院數(shù)據(jù)現(xiàn)狀分析、實施階段數(shù)據(jù)源情況分析、第一階段實施數(shù)據(jù)倉庫(EDW)設(shè)計建議作為參考;總體架構(gòu)設(shè)計架構(gòu)時充分考慮與現(xiàn)有系統(tǒng)兼容,充分利用已有成果,避免重復(fù)開發(fā)和建設(shè)??傮w架構(gòu)設(shè)計過程中應(yīng)遵守西安歐亞學(xué)院的IT管理規(guī)程,保證最終的系統(tǒng)可以順利的部署并移交給西安歐亞學(xué)院的運(yùn)行維護(hù)部門??傮w架構(gòu)的設(shè)計特點 權(quán)衡功能、性能、可擴(kuò)展性、易用性、可管理性和性價比。根據(jù)西安歐亞學(xué)院的數(shù)據(jù)情況和分析需求,采用多層次的企業(yè)數(shù)據(jù)倉庫(EDW)系統(tǒng)架構(gòu)來保證在存在復(fù)雜的數(shù)據(jù)種類和關(guān)系的海量數(shù)據(jù)上進(jìn)行業(yè)務(wù)分析和查詢在業(yè)務(wù)支持能力和性能等方面的要求,滿足西安歐亞學(xué)院5年信息化發(fā)展需求。多級/自動的增量ETL加載機(jī)制,有效提高ETL并發(fā)度、加載效率,降低錯誤處理的復(fù)雜性。通過用戶入口支持用戶采用Web瀏覽器使用查詢和分析工具,統(tǒng)一的信息服務(wù)界面,提高系統(tǒng)易用性,減少技術(shù)支持工作量。利用企業(yè)信息集成和Web數(shù)據(jù)服務(wù),提高系統(tǒng)的數(shù)據(jù)支持能力和接口的一致性。統(tǒng)一的數(shù)據(jù)增強(qiáng)平臺也減少數(shù)據(jù)增強(qiáng)的復(fù)雜度。執(zhí)行架構(gòu)執(zhí)行架構(gòu)的主要內(nèi)容是描述數(shù)據(jù)倉庫(EDW)項目執(zhí)行架構(gòu)的建設(shè)要求及指導(dǎo)原則,用于規(guī)范本項目最終生產(chǎn)環(huán)境的建設(shè)。數(shù)據(jù)倉庫(EDW)項目的生產(chǎn)環(huán)境的建立需要參考并遵循執(zhí)行架構(gòu)部分提出的要求。上圖是數(shù)據(jù)倉庫(EDW)系統(tǒng)執(zhí)行架構(gòu),其中包含數(shù)據(jù)倉庫(EDW)系統(tǒng)中涵蓋的功能框架以及框架之間的邏輯關(guān)系。在以下的內(nèi)容中將對執(zhí)行架構(gòu)中的功能框架以及框架之間的關(guān)系進(jìn)行詳細(xì)描述,具體內(nèi)容包括:數(shù)據(jù)源:包括西安歐亞學(xué)院的多個源系統(tǒng),包括有教學(xué)系統(tǒng)、科研系統(tǒng)、人事系統(tǒng)、財務(wù)系統(tǒng)、其它系統(tǒng)等。數(shù)據(jù)落地區(qū):此部分內(nèi)容說明數(shù)據(jù)落地的用途,同時對數(shù)據(jù)落地區(qū)應(yīng)具備的功能進(jìn)行了標(biāo)準(zhǔn)定義以及數(shù)據(jù)落地區(qū)與其他功能組件之間的關(guān)聯(lián)關(guān)系;ETL:此部分內(nèi)容描述ETL系統(tǒng)中數(shù)據(jù)抽取、轉(zhuǎn)換、加載等功能的需求,同時定義了ETL系統(tǒng)建設(shè)的標(biāo)準(zhǔn)以及ETL與系統(tǒng)中其他功能組件之間的關(guān)系;數(shù)據(jù)準(zhǔn)備區(qū):此部分描述數(shù)據(jù)準(zhǔn)備區(qū)應(yīng)具備的功能,以及數(shù)據(jù)準(zhǔn)備區(qū)在建設(shè)過程中的標(biāo)準(zhǔn)需求。數(shù)據(jù)存儲區(qū):此部分內(nèi)容描述數(shù)據(jù)倉庫(EDW)系統(tǒng)在建設(shè)的過程中應(yīng)遵循的標(biāo)準(zhǔn)以及系統(tǒng)建設(shè)過程中應(yīng)滿足的需求;業(yè)務(wù)應(yīng)用:此部分內(nèi)容描述BI應(yīng)用系統(tǒng)建設(shè)的系統(tǒng)需求,包含對應(yīng)用環(huán)境、分析環(huán)境、靜態(tài)報表環(huán)境;用戶環(huán)境:此部分的內(nèi)容描述用戶在數(shù)據(jù)倉庫(EDW)系統(tǒng)中應(yīng)具備運(yùn)用的能力,包括:利用通用展現(xiàn)平臺進(jìn)行信息展現(xiàn)、報表的分發(fā)、數(shù)據(jù)分發(fā),同時描述在分發(fā)過程中應(yīng)遵守的分發(fā)的原則;元數(shù)據(jù)管理:此部分描述在系統(tǒng)執(zhí)行架構(gòu)中元數(shù)據(jù)管控的內(nèi)容以及元數(shù)據(jù)管控系統(tǒng)的建設(shè)的標(biāo)準(zhǔn)定義;系統(tǒng)安全性:此部分內(nèi)容主要描述數(shù)據(jù)倉庫(EDW)系統(tǒng)中的安全性管理內(nèi)容,包括應(yīng)用安全、網(wǎng)絡(luò)安全、數(shù)據(jù)安全、系統(tǒng)安全等,同時描述系統(tǒng)安全在建立過程中遵循的原則;基礎(chǔ)設(shè)施平臺(服務(wù)器、網(wǎng)絡(luò)、存儲):此部分內(nèi)容主要描述生產(chǎn)系統(tǒng)中的硬件資源,包括:服務(wù)器,網(wǎng)絡(luò)以及存儲的資源需求,容量規(guī)劃應(yīng)滿足的系統(tǒng)指標(biāo)等內(nèi)容。數(shù)據(jù)源源數(shù)據(jù)系統(tǒng)是報表、關(guān)鍵指標(biāo)、靈活查詢、主題分析等應(yīng)用系統(tǒng)的基礎(chǔ)數(shù)據(jù)來源。在系統(tǒng)建設(shè)初期,源數(shù)據(jù)系統(tǒng)應(yīng)提供能滿足初始業(yè)務(wù)需要的數(shù)據(jù)以及業(yè)務(wù)系統(tǒng)需要提供完整數(shù)據(jù)的時間窗口,在數(shù)據(jù)倉庫(EDW)系統(tǒng)擴(kuò)展的過程中,各個源數(shù)據(jù)系統(tǒng)中的數(shù)據(jù)將逐漸的加載到數(shù)據(jù)倉庫(EDW)系統(tǒng)當(dāng)中。源數(shù)據(jù)無法滿足應(yīng)用需求時,系統(tǒng)應(yīng)提供手工方式通過手工數(shù)據(jù)補(bǔ)入平臺將需要的數(shù)據(jù)補(bǔ)入到數(shù)據(jù)倉庫(EDW)系統(tǒng)中。數(shù)據(jù)落地區(qū)數(shù)據(jù)落地區(qū)是為了保證多系統(tǒng)對源系統(tǒng)數(shù)據(jù)抽取的需求,在數(shù)據(jù)從源數(shù)據(jù)系統(tǒng)抽取后在統(tǒng)一的數(shù)據(jù)集成環(huán)境中整合。數(shù)據(jù)落地區(qū)應(yīng)建立與各相關(guān)源數(shù)據(jù)系統(tǒng)的接口,將這些系統(tǒng)定期卸載的數(shù)據(jù)以固定的格式接收、存放到落地區(qū),考慮數(shù)據(jù)傳輸和加載的速度,源數(shù)據(jù)系統(tǒng)應(yīng)以文本文件格式將數(shù)據(jù)定期傳輸給數(shù)據(jù)落地區(qū)進(jìn)行處理。數(shù)據(jù)落地區(qū)的數(shù)據(jù)存儲格式原則上是與數(shù)據(jù)源的存儲格式保持一致數(shù)據(jù)ETL架構(gòu)ETL是數(shù)據(jù)的抽取、轉(zhuǎn)換、加載的全部過程,它是數(shù)據(jù)從數(shù)據(jù)落地區(qū)到ETL服務(wù)器以及從ETL服務(wù)器到數(shù)據(jù)倉庫(EDW)的數(shù)據(jù)遷移過程以及數(shù)據(jù)從數(shù)據(jù)倉庫(EDW)向數(shù)據(jù)集市的數(shù)據(jù)遷移過程中必須使用的過程和方法,ETL系統(tǒng)應(yīng)包括以下三個主要功能:數(shù)據(jù)抽?。簭臄?shù)據(jù)落地區(qū)系統(tǒng)抽取數(shù)據(jù)倉庫(EDW)中需要的數(shù)據(jù);數(shù)據(jù)轉(zhuǎn)換:將從源數(shù)據(jù)系統(tǒng)獲取的數(shù)據(jù)轉(zhuǎn)換成數(shù)據(jù)倉庫(EDW)要求的形式,同時按照業(yè)務(wù)需求對數(shù)據(jù)進(jìn)行轉(zhuǎn)換;數(shù)據(jù)加載:將助轉(zhuǎn)換后的數(shù)據(jù)裝載到數(shù)據(jù)倉庫(EDW)的物理模型中;數(shù)據(jù)準(zhǔn)備區(qū)數(shù)據(jù)準(zhǔn)備區(qū)是數(shù)據(jù)存儲的臨時存儲區(qū)域,數(shù)據(jù)在其中只作暫時性保存,數(shù)據(jù)經(jīng)轉(zhuǎn)換后導(dǎo)入到數(shù)據(jù)倉庫(EDW)的物理模型中。數(shù)據(jù)準(zhǔn)備區(qū)的功能包括:格式轉(zhuǎn)換、排序去重/篩選、通用基礎(chǔ)清洗、連接/合并/分割、業(yè)務(wù)轉(zhuǎn)換等數(shù)據(jù)存儲區(qū)數(shù)據(jù)存儲區(qū)是面向主題的、集成的、面向企業(yè)的、最明細(xì)的數(shù)據(jù)存儲,其內(nèi)容是依據(jù)最終用戶應(yīng)用和分析需求來進(jìn)行組織。數(shù)據(jù)存儲區(qū)中的數(shù)據(jù)模型對標(biāo)準(zhǔn)層數(shù)據(jù)、基礎(chǔ)整合數(shù)據(jù)、匯總數(shù)據(jù)和面向應(yīng)用的集市數(shù)據(jù)按數(shù)據(jù)層次進(jìn)行管理,每個數(shù)據(jù)層有自己的數(shù)據(jù)管控重點。對于每個數(shù)據(jù)層次,再按主題進(jìn)行分類組織。這樣就可以有效的將西安歐亞學(xué)院的操作型數(shù)據(jù)、匯總型數(shù)據(jù)和分析型數(shù)據(jù)以清晰的架構(gòu)組織、管理起來,并相輔相成。數(shù)據(jù)層的內(nèi)容相互促進(jìn)發(fā)展,組成西安歐亞學(xué)院完善的數(shù)據(jù)集合,為各種主題管理應(yīng)用的構(gòu)建提供良好的數(shù)據(jù)架構(gòu)基礎(chǔ)。業(yè)務(wù)應(yīng)用業(yè)務(wù)應(yīng)用是數(shù)據(jù)倉庫(EDW)系統(tǒng)向業(yè)務(wù)用戶提供應(yīng)用功能支持,根據(jù)應(yīng)用服務(wù)提供的形式和所采用的應(yīng)用系統(tǒng)的不同,業(yè)務(wù)應(yīng)用主要定義在以下幾個技術(shù)環(huán)境。數(shù)據(jù)集市:在業(yè)務(wù)應(yīng)用層中包含了應(yīng)用系統(tǒng)中需要的應(yīng)用集市、OLAP、靜態(tài)報表等數(shù)據(jù)集市。數(shù)據(jù)集市是一組特定的、針對某個主題域、部門或用戶分類的數(shù)據(jù)集合。這些數(shù)據(jù)需要針對用戶的快速訪問和數(shù)據(jù)輸出進(jìn)行優(yōu)化,優(yōu)化的方式可以通過對數(shù)據(jù)結(jié)構(gòu)進(jìn)行匯總和索引。通過數(shù)據(jù)集市可以保障數(shù)據(jù)倉庫(EDW)的高可用性、可擴(kuò)展性和高性能。應(yīng)用環(huán)境:應(yīng)用環(huán)境是為滿足業(yè)務(wù)需要在數(shù)據(jù)數(shù)據(jù)倉庫(EDW)環(huán)境中配置的應(yīng)用軟件包。分析環(huán)境:數(shù)據(jù)分析環(huán)境為數(shù)據(jù)倉庫(EDW)的高端用戶提供即時的數(shù)據(jù)分析功能等。報表環(huán)境:報表環(huán)境是于來產(chǎn)生和發(fā)布靜態(tài)報表的環(huán)境,包括:產(chǎn)生的靜態(tài)報表、OLAP產(chǎn)生的報表、KPI指標(biāo)展現(xiàn)以及其他系統(tǒng)產(chǎn)生的報表。元數(shù)據(jù)管控元數(shù)據(jù)管控是對數(shù)據(jù)信息的收集和發(fā)布的集成管理,數(shù)據(jù)信息包括:數(shù)據(jù)的業(yè)務(wù)含義和技術(shù)特性。數(shù)據(jù)倉庫系統(tǒng)架構(gòu)中的各個部分中都含有元數(shù)據(jù)信息,應(yīng)對其進(jìn)行主動式管理,以保證它正確的定義、收集和使用。元數(shù)據(jù)是“關(guān)于數(shù)據(jù)的數(shù)據(jù)”。應(yīng)包括文件結(jié)構(gòu)定義,數(shù)據(jù)庫字段名稱,數(shù)據(jù)模型中的長度和標(biāo)準(zhǔn),以及在域-域或域-報表對應(yīng)關(guān)系中的計算和公式等內(nèi)容。元數(shù)據(jù)管控的架構(gòu)如下圖所示,系統(tǒng)的最終架構(gòu)應(yīng)實現(xiàn)對元數(shù)據(jù)的集中的管理方式:系統(tǒng)安全性數(shù)據(jù)倉庫(EDW)系統(tǒng)中的數(shù)據(jù)和報表信息均為敏感信息。因此必須采用適當(dāng)?shù)陌踩呗砸员WC其系統(tǒng)和數(shù)據(jù)的安全性。數(shù)據(jù)倉庫系統(tǒng)的安全性應(yīng)涵蓋如下四個方面:驗證:系統(tǒng)應(yīng)對用戶進(jìn)行訪問控制,保證只有合法的用戶才能進(jìn)入到系統(tǒng)中;授權(quán):系統(tǒng)應(yīng)根據(jù)用戶角色對其進(jìn)行授權(quán),包括對數(shù)據(jù)的訪問權(quán)限,對功能的使用權(quán)限等。機(jī)密性:所有的敏感數(shù)據(jù)必須被嚴(yán)格控制,禁止未授權(quán)訪問,并保障其安全性。一致性:數(shù)據(jù)和程序只能在授權(quán)模式下進(jìn)行修改。針對上述6個方面,數(shù)據(jù)倉庫分系統(tǒng)應(yīng)按照以下的6個方面的標(biāo)準(zhǔn)進(jìn)行建設(shè):數(shù)據(jù)庫層只有被授權(quán)用戶才能訪問和修改數(shù)據(jù)庫中的信息并且數(shù)據(jù)在傳輸過程中應(yīng)對敏感信息進(jìn)行加密處理來保證數(shù)據(jù)的安全。數(shù)據(jù)庫管理員應(yīng)按照角色對數(shù)據(jù)庫用戶進(jìn)行劃分,并且通過賦予角色權(quán)限的方式實現(xiàn)對用戶安全性訪問控制的管理,如:針對用戶組或耽擱用戶分配特定數(shù)據(jù)表訪問權(quán)限。系統(tǒng)層系統(tǒng)應(yīng)防止未授權(quán)訪問和系統(tǒng)調(diào)用,及時進(jìn)行系統(tǒng)安全補(bǔ)丁的更新。對于系統(tǒng)主機(jī)應(yīng)采用服務(wù)器加固的方法,來保證整個系統(tǒng)的安全性。網(wǎng)絡(luò)層網(wǎng)絡(luò)層安全是保證網(wǎng)絡(luò)節(jié)點之間數(shù)據(jù)傳遞的安全性,以及網(wǎng)絡(luò)環(huán)境不受惡意攻擊。西安歐亞學(xué)院數(shù)據(jù)倉庫環(huán)境建立在教育網(wǎng)絡(luò)中,不同功能的服務(wù)器應(yīng)部署在不同網(wǎng)段中,網(wǎng)段之間相互隔離,對網(wǎng)段之間的訪問應(yīng)通過防火墻并定義嚴(yán)格的訪問控制策略。整個系統(tǒng)的網(wǎng)絡(luò)環(huán)境應(yīng)得到實時監(jiān)控,對入侵進(jìn)行檢測和處理,并在發(fā)生入侵時通知系統(tǒng)管理員。物理層物理層安全保障物理設(shè)備(主機(jī)、路由器等)不受非法用戶攻擊。目前物理設(shè)備的安全性由運(yùn)行中心負(fù)責(zé)。管理管理部分與上述的所有安全問題相關(guān),對安全問題的管理必須由多個部門共同協(xié)作完成。管理層面包括:安全資源:實現(xiàn)各種安全使用的資源,如:防火墻,入侵檢測和處理設(shè)備,反病毒軟件等;安全策略和規(guī)劃:各種安全規(guī)則,組織和責(zé)任人;突發(fā)事件處理:在發(fā)生安全威脅時的應(yīng)急處理流程,包括:事件記錄、時間報告制度等流程;安全審計:對安全策略的審核和檢查;災(zāi)難恢復(fù)計劃:發(fā)生問題后的系統(tǒng)和數(shù)據(jù)恢復(fù);功能組件架構(gòu)功能組件架構(gòu)設(shè)計原則設(shè)計數(shù)據(jù)倉庫(EDW)功能組件架構(gòu)設(shè)計原則是:Performance:高效,由于各目標(biāo)系統(tǒng)對源系統(tǒng)的數(shù)據(jù)需求越來越緊迫,數(shù)據(jù)倉庫(EDW)處理加工的時間窗口對目標(biāo)系統(tǒng)的業(yè)務(wù)功能實現(xiàn)就顯的尤為重要。因此高效處理、快速提供是設(shè)計數(shù)據(jù)倉庫(EDW)功能架構(gòu)的首要原則。Scalability:可擴(kuò)展性,目前西安歐亞學(xué)院各種數(shù)據(jù)分析類應(yīng)用需求旺盛,源系統(tǒng)、目標(biāo)系統(tǒng)的數(shù)據(jù)需求也在不斷增加、調(diào)整,因此可擴(kuò)展性是數(shù)據(jù)倉庫(EDW)系統(tǒng)生命力旺盛的重要保障。Flexibility:靈活性,系統(tǒng)架構(gòu)的設(shè)計應(yīng)體現(xiàn)較強(qiáng)的靈活性,數(shù)據(jù)倉庫(EDW)系統(tǒng)向目標(biāo)系統(tǒng)提供數(shù)據(jù)應(yīng)具備多種方式。Maintainability:可管理性,作為一個重要的數(shù)據(jù)交互系統(tǒng),其系統(tǒng)的可管理性也是十分重要的。功能組件架構(gòu)框架根據(jù)數(shù)據(jù)倉庫(EDW)功能組件的建設(shè)原則,數(shù)據(jù)倉庫(EDW)系統(tǒng)在功能組件方面,包括以下功能:集中的數(shù)據(jù)存儲集中的數(shù)據(jù)存儲包括文件和數(shù)據(jù)庫存放方式,為數(shù)據(jù)的整合,備份歸檔提供便利;能夠比較方便的提供數(shù)據(jù)共享服務(wù);集中的數(shù)據(jù)存儲方便數(shù)據(jù)集成,而且是數(shù)據(jù)集成的驅(qū)動力之一;在數(shù)據(jù)庫中集中存放借助數(shù)據(jù)庫管理工具有利于加強(qiáng)數(shù)據(jù)的管理;提供者和使用者機(jī)制的建立在數(shù)據(jù)抽取支持近實時的數(shù)據(jù)抽取機(jī)制在數(shù)據(jù)提供支持提供方式的多樣化制定數(shù)據(jù)服務(wù)協(xié)議,提供可定制的數(shù)據(jù)服務(wù)并行可擴(kuò)展的數(shù)據(jù)加工借助強(qiáng)大的ETL工具思邁特ETL工具,最大程度上進(jìn)行了并行處理,處理方式體現(xiàn)在partitionparallel,pipelineparallel.提供靈活多樣的加工處理方式,不僅可以使用ETL工具自帶的處理方式,而且提供三種自定義的接口可以完全重用已有的處理方式,或者對原有處理方式僅做很小的修改數(shù)據(jù)加工能力的擴(kuò)展非常方便,可實時進(jìn)行擴(kuò)展,提供在原有硬件上擴(kuò)展和增加硬件等擴(kuò)展方式,應(yīng)用程序基本不用變化可管理性ETL過程中引入ABC控制元數(shù)據(jù)管控包含業(yè)務(wù)元數(shù)據(jù)和技術(shù)元數(shù)據(jù)的管理,有利于整個數(shù)據(jù)流的管理集中共享,強(qiáng)大的擴(kuò)展能力對應(yīng)用程序的透明,提供HA強(qiáng)大的ETL工具思邁特ETL工具提供了豐富的調(diào)度接口和作業(yè)狀態(tài)信息,日志信息以及一定的調(diào)度功能,不但簡化調(diào)度的復(fù)雜度,而且有助于調(diào)度的優(yōu)化完善。邏輯架構(gòu)邏輯架構(gòu)框架西安歐亞學(xué)院數(shù)據(jù)倉庫(EDW)的邏輯體系架構(gòu),這一架構(gòu)是在思邁特可擴(kuò)展的數(shù)據(jù)倉庫(EDW)系統(tǒng)框架的基礎(chǔ)上,結(jié)合西安歐亞學(xué)院信息系統(tǒng)建設(shè)的實際情況而設(shè)計出來的多層、可擴(kuò)展框架結(jié)構(gòu)。架構(gòu)的核心上包括源數(shù)據(jù)層、ETL流程調(diào)度、數(shù)據(jù)平臺層、數(shù)據(jù)集市層、應(yīng)用服務(wù)層、訪問控制層、用戶層數(shù)據(jù)傳輸通道七個大部分,另外,元數(shù)據(jù)管控和安全管理也是系統(tǒng)必不可少的部分,這2部分會涉及到所有核心層次。在明確定義各層之間的接口后,多層框架結(jié)構(gòu)具有高度的擴(kuò)展能力和方便的系統(tǒng)開發(fā)和維護(hù)性能,符合目前流行的多層應(yīng)用結(jié)構(gòu),適合數(shù)據(jù)倉庫(EDW)系統(tǒng)多階段、多層次的應(yīng)用特點。源數(shù)據(jù)層【功能與作用】西安歐亞學(xué)院的各個業(yè)務(wù)系統(tǒng)為整個數(shù)據(jù)倉庫(EDW)系統(tǒng)提供原始數(shù)據(jù)支持,首先作為ETL層的數(shù)據(jù)抽取源。【組成部分】對于系統(tǒng)的數(shù)據(jù)源來說,除了從西安歐亞學(xué)院的數(shù)據(jù)倉庫(EDW)系統(tǒng)獲取數(shù)據(jù)外,還有一部分從西安歐亞學(xué)院業(yè)務(wù)系統(tǒng)獲取數(shù)據(jù),另一部分從本地特色業(yè)務(wù)系統(tǒng)獲取數(shù)據(jù)。目前西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)的數(shù)據(jù)源包括西安歐亞學(xué)院的多個業(yè)務(wù)系統(tǒng),主要有教務(wù)系統(tǒng)、人事系統(tǒng)、財務(wù)系統(tǒng)等。ETL流程調(diào)度層【功能與作用】該層為數(shù)據(jù)倉庫(EDW)數(shù)據(jù)流向的主要環(huán)節(jié),數(shù)據(jù)倉庫(EDW)系統(tǒng)數(shù)據(jù)流動的流程調(diào)度核心層,流程調(diào)度主要針對下面幾個方面:數(shù)據(jù)倉庫(EDW)系統(tǒng)將數(shù)據(jù)源的數(shù)據(jù)抽取到數(shù)據(jù)落地區(qū)數(shù)據(jù)倉庫(EDW)系統(tǒng)對數(shù)據(jù)執(zhí)行格式轉(zhuǎn)換、排序去重、通用數(shù)據(jù)清洗、業(yè)務(wù)轉(zhuǎn)換后等操作,最終完成數(shù)據(jù)準(zhǔn)備區(qū)加載。數(shù)據(jù)倉庫(EDW)系統(tǒng)再將數(shù)據(jù)準(zhǔn)備區(qū)的數(shù)據(jù)按照數(shù)據(jù)倉庫(EDW)數(shù)據(jù)模型的方式加載到數(shù)據(jù)存儲區(qū)中。在數(shù)據(jù)存儲區(qū)中進(jìn)行基礎(chǔ)數(shù)據(jù)層、加工匯總層和應(yīng)用集市層的數(shù)據(jù)加載。數(shù)據(jù)倉庫(EDW)中的數(shù)據(jù)準(zhǔn)備區(qū)和數(shù)據(jù)存儲區(qū)可以為其它系統(tǒng)提供數(shù)據(jù)服務(wù)。數(shù)據(jù)倉庫(EDW)提供數(shù)據(jù)服務(wù)?!窘M成部分】上面的邏輯架構(gòu)圖淡綠色矩形部分為思邁特ETL技術(shù)架構(gòu)圖,由圖可知思邁特ETL是一個作業(yè)流控制產(chǎn)品,其作用是讓許多的任務(wù)在作業(yè)的執(zhí)行條件滿足時自動地執(zhí)行。ETL最基本的可執(zhí)行元素是單元,每個單元是完成某一特定功能的程序,相關(guān)單元組合在一起構(gòu)成了可以調(diào)度的最小組件——任務(wù)。由上面的技術(shù)架構(gòu)圖可知,ETL包含下列組件:知識庫建立在DB中的一個數(shù)據(jù)庫,包含了與流程調(diào)度相關(guān)的一組表,保存ETL流程調(diào)度服務(wù)器、任務(wù)、任務(wù)之間的依賴觸發(fā)關(guān)系、任務(wù)組、調(diào)度計劃等多種類型的信息。偵測器駐留在后臺的服務(wù),基于定義的觸發(fā)規(guī)則和調(diào)度計劃監(jiān)測是否觸發(fā)任務(wù)的執(zhí)行。任務(wù)調(diào)度引擎接受偵測器的信息調(diào)度任務(wù)執(zhí)行(可以使本服務(wù)器任務(wù)也可以是其它服務(wù)器的任務(wù))。任務(wù)執(zhí)行代理調(diào)用任務(wù)包含的每個單元執(zhí)行的服務(wù),同一服務(wù)器上可以有多個任務(wù)執(zhí)行代理同時運(yùn)行。任務(wù)封裝在Perl程序中,執(zhí)行數(shù)據(jù)加載、整合、立方體生成等工作的一組程序。日志管理引擎記錄ETL各個服務(wù)器組件以及每個任務(wù)的執(zhí)行日志,日志按天保存,可以定期清理。管理監(jiān)控器Java應(yīng)用程序,用于定義任務(wù)、任務(wù)組合觸發(fā)關(guān)系等信息,同時可以實時監(jiān)控任務(wù)執(zhí)行情況查看日志。思邁特ETL作為專門為數(shù)據(jù)倉庫系統(tǒng)設(shè)計的流程調(diào)度平臺具有如下特點:任務(wù)執(zhí)行代理可分布在多臺服務(wù)器上。結(jié)構(gòu)簡單、伸縮性強(qiáng)。支持多種執(zhí)行任務(wù)。加載數(shù)據(jù)整合數(shù)據(jù)數(shù)據(jù)質(zhì)量檢查和清洗數(shù)據(jù)轉(zhuǎn)換OLAP數(shù)據(jù)生成數(shù)據(jù)挖掘模型的執(zhí)行定制報表的產(chǎn)生定制頁面的產(chǎn)生數(shù)據(jù)庫備份、告警等系統(tǒng)作業(yè)調(diào)用其他ETL/ELT工具產(chǎn)生的任務(wù)數(shù)據(jù)導(dǎo)出到指定的渠道系統(tǒng)執(zhí)行的任務(wù)可以是另一個任務(wù)調(diào)度引擎觸發(fā)(如:數(shù)據(jù)倉庫(EDW))??梢詥悠渌腅TL引擎的任務(wù)。數(shù)據(jù)平臺層【功能與作用】作為本系統(tǒng)的數(shù)據(jù)核心部分,它負(fù)責(zé)存儲和管理來自各種源數(shù)據(jù)系統(tǒng)的數(shù)據(jù),并為訪問用戶提供數(shù)據(jù)服務(wù)。這些數(shù)據(jù)是按照在邏輯數(shù)據(jù)模型分主題存放的?!窘M成部分】本層由數(shù)據(jù)準(zhǔn)備區(qū)、基礎(chǔ)數(shù)據(jù)區(qū)、加工匯總和集市應(yīng)用層四個部分組成。詳細(xì)內(nèi)容參見“數(shù)據(jù)倉庫(EDW)數(shù)據(jù)架構(gòu)”數(shù)據(jù)集市層【功能與作用】數(shù)據(jù)集市是一組特定的、針對某個主題域、部門或用戶分類的數(shù)據(jù)集合。這些數(shù)據(jù)需要針對用戶的快速訪問和數(shù)據(jù)輸出進(jìn)行優(yōu)化,優(yōu)化的方式可以通過對數(shù)據(jù)結(jié)構(gòu)進(jìn)行匯總和索引。通過數(shù)據(jù)集市可以保障數(shù)據(jù)倉庫(EDW)的高可用性、可擴(kuò)展性和高性能。【組成部分】包括:分析教務(wù)系統(tǒng)、財務(wù)系統(tǒng)、人事系統(tǒng)。安全管理體系安全管理體系主要包括以下四個方面:網(wǎng)絡(luò)安全主要包括在不同網(wǎng)絡(luò)層次設(shè)置不同級別的防火墻及IDS系統(tǒng),同時在每一個安全層次下通過部署不同的安全原則,這完全符合西安歐亞學(xué)院的安全級別規(guī)定。操作系統(tǒng)安全系統(tǒng)所有應(yīng)用或數(shù)據(jù)庫服務(wù)器均采用Unix操作系統(tǒng),操作系統(tǒng)本身有著嚴(yán)密的系統(tǒng)安全認(rèn)證與用戶權(quán)限管理體系,并具備登錄、審核以及資源訪問的審計與跟蹤。數(shù)據(jù)安全提供各種基于數(shù)據(jù)庫的安全保護(hù)機(jī)制。應(yīng)用安全應(yīng)用是直接面對用戶的,雖然應(yīng)用系統(tǒng)能夠持續(xù)提供服務(wù)是涉及到系統(tǒng)安全的問題,但是因為這些問題更多的是由系統(tǒng)的安全問題來保證的。所以就應(yīng)用級的安全策略更多的是保證對數(shù)據(jù)訪問的合法性。元數(shù)據(jù)管控體系在機(jī)構(gòu)內(nèi)關(guān)于數(shù)據(jù)的信息稱為“元數(shù)據(jù)(Metadata)”。清楚地區(qū)分?jǐn)?shù)據(jù)庫中的數(shù)據(jù)和元數(shù)據(jù)是很重要的,所謂元數(shù)據(jù),是指關(guān)于數(shù)據(jù)的數(shù)據(jù),即用來描述數(shù)據(jù)的類型、來源、定義、存儲位置,使得可以正確地使用數(shù)據(jù)倉庫。元數(shù)據(jù)倉庫(MetaDataRepository)對業(yè)務(wù)人員來說是很重要的,是業(yè)務(wù)人員與數(shù)據(jù)倉庫的數(shù)據(jù)交流的傳達(dá)手段。IT人員可能已經(jīng)擁有許多有效的工具進(jìn)行數(shù)據(jù)存取。但對業(yè)務(wù)人員,他們需要一種手段和工具來理解他們存取的數(shù)據(jù)。在本期數(shù)據(jù)倉庫(EDW)系統(tǒng)的建設(shè)中,包括技術(shù)元數(shù)據(jù)和業(yè)務(wù)元數(shù)據(jù)兩類,其數(shù)據(jù)源涵蓋了數(shù)據(jù)倉庫(EDW)系統(tǒng)的各個環(huán)節(jié),包括:數(shù)據(jù)源系統(tǒng)、數(shù)據(jù)倉庫(EDW)數(shù)據(jù)庫、數(shù)據(jù)倉庫(EDW)邏輯數(shù)據(jù)模型、ETL系統(tǒng)、業(yè)務(wù)應(yīng)用系統(tǒng)等,同時,還將涉及數(shù)據(jù)的業(yè)務(wù)含義和業(yè)務(wù)規(guī)則等相關(guān)業(yè)務(wù)文檔。在架構(gòu)上,元數(shù)據(jù)系統(tǒng)包括:元數(shù)據(jù)應(yīng)用、元數(shù)據(jù)報表、元數(shù)據(jù)分析、元數(shù)據(jù)集成系統(tǒng)、元數(shù)據(jù)展現(xiàn)系統(tǒng)、元數(shù)據(jù)管控系統(tǒng)、元數(shù)據(jù)維護(hù)系統(tǒng)。數(shù)據(jù)處理流程各業(yè)務(wù)數(shù)據(jù)源系統(tǒng)通過多種方式(如:ETL工具直接從源系統(tǒng)獲取、源系統(tǒng)數(shù)據(jù)批量導(dǎo)出)將數(shù)據(jù)獲取過來,由數(shù)據(jù)落地區(qū)區(qū)進(jìn)行集中管理。后續(xù)的數(shù)據(jù)加工、轉(zhuǎn)換通過ETLServer來完成,中間采取不落地的方式,將加工完畢后的數(shù)據(jù)放在數(shù)據(jù)準(zhǔn)備區(qū)域。ETLServer可通過dsjob,F(xiàn)TP,NFS等方式從數(shù)據(jù)落地區(qū)獲取數(shù)據(jù),將處理后的結(jié)果放在數(shù)據(jù)準(zhǔn)備區(qū)域。再將數(shù)據(jù)準(zhǔn)備區(qū)的數(shù)據(jù)加載到數(shù)據(jù)存儲區(qū)中。根據(jù)目標(biāo)系統(tǒng)的不同,采用靈活的方式向外提供數(shù)據(jù),可使用ETL工具直接向目標(biāo)系統(tǒng)加載或者通過FTP方式向其他目標(biāo)傳輸。為支持其他的業(yè)務(wù)需求,將近期(30-60天)的明細(xì)數(shù)據(jù)、流水?dāng)?shù)據(jù)集中存放在數(shù)據(jù)庫系統(tǒng)中,日常增量數(shù)據(jù)刷新數(shù)據(jù)庫系統(tǒng)。整個過程通過調(diào)度工具進(jìn)行統(tǒng)一調(diào)度,集中管理,確保各項任務(wù)有序完成。數(shù)據(jù)流程數(shù)據(jù)倉庫(EDW)的模型分為三層,分別為數(shù)據(jù)整合層模型、應(yīng)用匯總模型、接口層模型。數(shù)據(jù)整合層模型:原子數(shù)據(jù)層,整合來自學(xué)生、財務(wù)管理等系統(tǒng)的數(shù)據(jù),執(zhí)行數(shù)據(jù)標(biāo)準(zhǔn)化和數(shù)據(jù)清洗工作,支持上層應(yīng)用的建設(shè);該層模型表結(jié)構(gòu)盡量與源系統(tǒng)保持一致,但按業(yè)務(wù)主題進(jìn)行分類,采用范式化的建模方式,建成學(xué)校級的單一數(shù)據(jù)視圖,模型擴(kuò)展性強(qiáng)且具有業(yè)務(wù)中立性,用于支持各類整合型的分析型應(yīng)用。應(yīng)用數(shù)據(jù)模型:分析上層的應(yīng)用需求,實現(xiàn)面向先學(xué)生、教職工、學(xué)科等主題的數(shù)據(jù)匯總工作,建設(shè)應(yīng)用所公有的公共維度表和事實表;依賴于對應(yīng)用的提煉,但不面向具體應(yīng)用,包括數(shù)據(jù)預(yù)關(guān)聯(lián)、預(yù)匯總、預(yù)加工,可以有多層的數(shù)據(jù)粒度。數(shù)據(jù)接口層,按照特定的應(yīng)用需求建設(shè)模型,以星型、雪花型模型為主,支持以報表和分析為應(yīng)用的匯總事實表,數(shù)據(jù)來源可以包括基礎(chǔ)數(shù)據(jù)層和應(yīng)用數(shù)據(jù)層。業(yè)務(wù)流程用戶使用系統(tǒng)時,總體的業(yè)務(wù)流程如下:創(chuàng)建學(xué)校組織結(jié)構(gòu)、用戶及角色,并給用戶進(jìn)行授權(quán)。初始化填報時間。按要求進(jìn)行數(shù)據(jù)填報,每張表格錄入數(shù)據(jù)后進(jìn)行保存并進(jìn)行數(shù)據(jù)合法性校驗,若校驗通過可提交審核,數(shù)據(jù)審核通過后可上報數(shù)據(jù)。需注意的是,如果校驗或?qū)徍瞬煌ㄟ^,則需要修改相應(yīng)填報數(shù)據(jù)并重新保存、校驗、審核。其中:數(shù)據(jù)審核、數(shù)據(jù)上報需校級管理員賬號進(jìn)行操作。完成數(shù)據(jù)上報后,把上報的數(shù)據(jù)打包報送到教育部。圖:業(yè)務(wù)流程運(yùn)維架構(gòu)運(yùn)維架構(gòu)概述下圖中給出了西安歐亞學(xué)院數(shù)據(jù)采集分析系統(tǒng)的運(yùn)維架構(gòu),在本系統(tǒng)上線后,為了保持系統(tǒng)良好的穩(wěn)定性而定義的相關(guān)的管理需求。運(yùn)維架構(gòu)主要是針對執(zhí)行架構(gòu)的數(shù)據(jù)導(dǎo)入層、數(shù)據(jù)服務(wù)層、中間服務(wù)層和訪問控制層服務(wù)器進(jìn)行管理,面向的最終用戶是IT人員。圖1運(yùn)維邏輯體系架構(gòu)運(yùn)維架構(gòu)中包含了如下組件:系統(tǒng)監(jiān)控管理組件、系統(tǒng)維護(hù)管理組件、備份恢復(fù)管理組件、故障切換管理組件、性能容量規(guī)劃組件和運(yùn)維安全管理組件。各個組件的主要功能如下:系統(tǒng)監(jiān)控管理組件:監(jiān)控網(wǎng)絡(luò)/系統(tǒng)性能、運(yùn)行,以及診斷和報告故障。管理的硬件和軟件包括所有開發(fā)、測試和生產(chǎn)環(huán)境中的硬件和軟件。系統(tǒng)維護(hù)管理組件:系統(tǒng)維護(hù)是指系統(tǒng)在運(yùn)行過程中,為了系統(tǒng)的正常服務(wù)而進(jìn)行的配置、參數(shù)管理,以及啟/停機(jī)、清理過期數(shù)據(jù)等日常操作,以及數(shù)據(jù)、系統(tǒng)發(fā)生變更的維護(hù)等。備份恢復(fù)管理組件:備份/恢復(fù)管理組件處理系統(tǒng)中所有必須的備份和恢復(fù)操作。這個組件根據(jù)備份策略,通過對數(shù)據(jù)的冗余存儲來保證系統(tǒng)可以從各種服務(wù)中斷中恢復(fù)。故障切換管理組件:故障切換管理提供了管理和控制應(yīng)用切換的機(jī)制。故障切換組件使用冗余系統(tǒng)和數(shù)據(jù)來保證關(guān)鍵任務(wù)數(shù)據(jù)流不間斷。當(dāng)發(fā)生故障或失敗時,該切換發(fā)生在主系統(tǒng)和備份系統(tǒng)之間。性能容量規(guī)劃組件:性能及容量規(guī)劃從環(huán)境中的不同元素收集利用數(shù)據(jù),并規(guī)劃硬件和軟件能力需求。運(yùn)維安全管理組件:運(yùn)維安全管理組件通過制定和管理運(yùn)維安全策略,并利用安全工具,維護(hù)信息系統(tǒng)資產(chǎn)(包括硬件、軟件、用戶數(shù)據(jù)、信息/數(shù)據(jù))的機(jī)密性、一致性和可用性。運(yùn)維環(huán)境管理組件:運(yùn)維環(huán)境管理用于確保物理環(huán)境和系統(tǒng)環(huán)境的妥善管理和保護(hù),不受故障和災(zāi)難的侵害,以及不受人為因素的干擾和破壞。整個運(yùn)維架構(gòu)通過一些標(biāo)準(zhǔn)的流程實現(xiàn)生產(chǎn)環(huán)境運(yùn)行管理,包括的流程主要是日常操作流程和特殊操作流程。日常操作流程是指IT用戶在日常為維護(hù)生產(chǎn)環(huán)境正常運(yùn)轉(zhuǎn)需要做的工作,如:數(shù)據(jù)倉庫管理、系統(tǒng)監(jiān)控、備份恢復(fù)、容量規(guī)劃。特殊操作流程不會每天發(fā)生,這一流程的啟動通常是由于系統(tǒng)軟硬件升級、數(shù)據(jù)變更、新增應(yīng)用等需求引起的。運(yùn)維架構(gòu)的邏輯框架系統(tǒng)監(jiān)控管理在數(shù)據(jù)倉庫(EDW)系統(tǒng)中,需要監(jiān)控管理的系統(tǒng)元素可以分為如下五類:網(wǎng)絡(luò)/主機(jī)管理:用于監(jiān)控、控制和報告網(wǎng)絡(luò)及主機(jī)狀態(tài)。數(shù)據(jù)庫/數(shù)據(jù)倉庫管理:提供相關(guān)監(jiān)控信息源,控制各個獨立的服務(wù)器或數(shù)據(jù)庫/數(shù)據(jù)倉庫。應(yīng)監(jiān)控所有的關(guān)鍵數(shù)據(jù)庫/數(shù)據(jù)倉庫性能比例,以保證高可用性和性能。應(yīng)用管理:處理客戶應(yīng)用中發(fā)生的事件。應(yīng)用本身包括了衡量內(nèi)部應(yīng)用響應(yīng)時間和性能的工具,應(yīng)搜集這些工具產(chǎn)生的信息(如日志、運(yùn)行報告等)用于監(jiān)控。生產(chǎn)調(diào)度:生產(chǎn)調(diào)度組件包括了一套應(yīng)用,用于調(diào)度和自動化網(wǎng)絡(luò)、系統(tǒng)和應(yīng)用管理(如ETL)特有的任務(wù)。安全管理:運(yùn)維架

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評論

0/150

提交評論