林子雨副教授數(shù)字素養(yǎng)通識(shí)教程廈門大學(xué)教材簡介本PPT是以下教材的配套講義林子雨編著《數(shù)字素養(yǎng)通識(shí)教程——大數(shù)據(jù)與人工智能時(shí)代的計(jì)算機(jī)通識(shí)教育》人民郵電出版社，2025年1月ISBN:978-7-115-65946-0

定價(jià)：59.8元教材官網(wǎng)：/post/digital-literacy/教材官網(wǎng)提供講義PPT、MOOC視頻、案例視頻、上機(jī)實(shí)驗(yàn)、教學(xué)大綱、課程思政案例、開學(xué)第一課講座PPT等豐富的教學(xué)資源掃一掃訪問教材官網(wǎng)主講教師和作者林子雨簡介廈門大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)系副教授以第一作者編著出版13本大數(shù)據(jù)系列教材被國內(nèi)1000余所高校采用榮獲“2022年福建省高等教育教學(xué)成果獎(jiǎng)特等獎(jiǎng)（個(gè)人排名第一）”入選“2021年高校計(jì)算機(jī)專業(yè)優(yōu)秀教師獎(jiǎng)勵(lì)計(jì)劃”2018年國家精品在線開放課程（獨(dú)立主講）2020年國家級(jí)線上一流本科課程（獨(dú)立主講）2021年國家級(jí)線上一流本科課程（獨(dú)立主講）入選“2023年教育部國家智慧教育公共服務(wù)平臺(tái)應(yīng)用典型案例”第4章深入了解大數(shù)據(jù)目錄01大數(shù)據(jù)思維02數(shù)據(jù)共享03數(shù)據(jù)開放05大數(shù)據(jù)安全06大數(shù)據(jù)應(yīng)用04大數(shù)據(jù)交易01大數(shù)據(jù)思維Parttwo傳統(tǒng)思維方式大數(shù)據(jù)時(shí)代需要新的思維方式大數(shù)據(jù)思維方式運(yùn)用大數(shù)據(jù)思維具體實(shí)例4.1大數(shù)據(jù)思維4.1.1傳統(tǒng)的思維方式機(jī)械思維世界變化的規(guī)律是確定的，這一點(diǎn)從托勒密到牛頓大家都認(rèn)可01因?yàn)橛写_定性做保障，因此規(guī)律不僅是可以被認(rèn)識(shí)的，而且可以用簡單的公式或者語言描述清楚。這一點(diǎn)在牛頓之前，大部分人并不認(rèn)可，而是簡單地把規(guī)律歸結(jié)為神的作用02這些規(guī)律應(yīng)該是放之四海而皆準(zhǔn)的，可以應(yīng)用到各種未知領(lǐng)域指導(dǎo)實(shí)踐，這種認(rèn)識(shí)是在牛頓之后才有的034.1.2大數(shù)據(jù)時(shí)代需要新的思維方式不確定性在我們生活的世界里無處不在，由于不確定性是這個(gè)世界的重要特征，以至于我們按照傳統(tǒng)的方法——機(jī)械論的方法，很難做出準(zhǔn)確的預(yù)測01世界的不確定性，折射出在信息時(shí)代的方法論：獲得更多的信息，有助于消除不確定性，因此，誰掌握了信息，誰就能夠獲取財(cái)富，這就如同在工業(yè)時(shí)代，誰掌握了資本誰就能獲取財(cái)富一樣02數(shù)據(jù)學(xué)家認(rèn)為，世界的本質(zhì)是數(shù)據(jù)。通過采集、量化、計(jì)算、分析各種事物，來重新解釋和定義這個(gè)世界，并通過數(shù)據(jù)來消除不確定性，對(duì)未來加以預(yù)測03轉(zhuǎn)變思維方式，努力把身邊的事物量化，以數(shù)據(jù)的形式加以對(duì)待，這是實(shí)現(xiàn)大數(shù)據(jù)時(shí)代思維方式轉(zhuǎn)變的“核心”044.1.3大數(shù)據(jù)思維方式全樣而非抽樣過去，由于數(shù)據(jù)采集、數(shù)據(jù)存儲(chǔ)和處理能力的限制，在科學(xué)分析中，通常采用抽樣的方法，即從全集數(shù)據(jù)中抽取一部分樣本數(shù)據(jù)，通過對(duì)樣本數(shù)據(jù)的分析，來推斷全集數(shù)據(jù)的總體特征大數(shù)據(jù)技術(shù)提供了理論上近乎無限的數(shù)據(jù)存儲(chǔ)空間和強(qiáng)大的海量數(shù)據(jù)并行處理能力，可以直接針對(duì)全集數(shù)據(jù)而不是抽樣數(shù)據(jù)，并且可以在短時(shí)間內(nèi)得到分析結(jié)果4.1.3大數(shù)據(jù)思維方式效率而非精確過去，我們在科學(xué)分析中采用抽樣分析方法，就必須追求分析方法的精確性，因?yàn)椋闃臃治鲋皇轻槍?duì)部分樣本的分析，其分析結(jié)果被應(yīng)用到全集數(shù)據(jù)以后，誤差會(huì)被放大現(xiàn)在，大數(shù)據(jù)時(shí)代采用全樣分析而不是抽樣分析，全樣分析結(jié)果就不存在誤差被放大的問題，因此，追求高精確性已經(jīng)不是其首要目標(biāo)，數(shù)據(jù)分析需要秒級(jí)響應(yīng)，因此，效率成為關(guān)注的核心追求效率不是追求精確4.1.3大數(shù)據(jù)思維方式相關(guān)而非因果在大數(shù)據(jù)時(shí)代，因果關(guān)系不再那么重要，人們轉(zhuǎn)而追求“相關(guān)性”而非“因果性”相關(guān)性用戶在網(wǎng)店購買一本書網(wǎng)店自動(dòng)推薦相關(guān)的另一本書4.1.3大數(shù)據(jù)思維方式以數(shù)據(jù)為中心數(shù)據(jù)驅(qū)動(dòng)方法從20世紀(jì)70年代開始起步，在八九十年代得到緩慢但穩(wěn)步的發(fā)展。進(jìn)入21世紀(jì)后，由于互聯(lián)網(wǎng)的出現(xiàn)，使得可用的數(shù)據(jù)量劇增，數(shù)據(jù)驅(qū)動(dòng)方法的優(yōu)勢越來越明顯，最終完成了從量變到質(zhì)變的飛躍。如今很多需要類似人類智能才能做的事情，計(jì)算機(jī)已經(jīng)可以勝任了，這得益于數(shù)據(jù)量的增加01全世界各個(gè)領(lǐng)域數(shù)據(jù)不斷向外擴(kuò)展，漸漸形成了另外一個(gè)特點(diǎn)，那就是很多數(shù)據(jù)開始出現(xiàn)交叉，各個(gè)維度的數(shù)據(jù)從點(diǎn)和線漸漸連成了網(wǎng)，或者說，數(shù)據(jù)之間的關(guān)聯(lián)性極大地增強(qiáng)，在這樣的背景下，就出現(xiàn)了大數(shù)據(jù)，使得“以數(shù)據(jù)為中心”的思考解決問題的方式優(yōu)勢逐漸得到顯現(xiàn)024.1.3大數(shù)據(jù)思維方式“我為人人，人人為我”每個(gè)使用導(dǎo)航軟件的智能手機(jī)用戶，一方面共享自己的實(shí)時(shí)位置信息給導(dǎo)航軟件公司（比如百度地圖），使得導(dǎo)航軟件公司可以從大量用戶那里獲得實(shí)時(shí)的交通路況大數(shù)據(jù)，另一方面，每個(gè)用戶又在享受導(dǎo)航軟件公司提供的基于交通大數(shù)據(jù)的實(shí)時(shí)導(dǎo)航服務(wù)。02數(shù)據(jù)共享Partthree4.2數(shù)據(jù)共享數(shù)據(jù)孤島問題數(shù)據(jù)孤島問題產(chǎn)生的原因消除數(shù)據(jù)孤島的重要意義實(shí)現(xiàn)數(shù)據(jù)共享所面臨的挑戰(zhàn)推進(jìn)數(shù)據(jù)共享的舉措4.2.1

數(shù)據(jù)孤島問題政府的數(shù)據(jù)孤島問題由于各政府部門建設(shè)數(shù)據(jù)庫所采用的技術(shù)、平臺(tái)及網(wǎng)絡(luò)標(biāo)準(zhǔn)不統(tǒng)一，導(dǎo)致政府職能部門之間難以實(shí)現(xiàn)數(shù)據(jù)對(duì)接與共享01縱向上各級(jí)垂直管理部門建設(shè)的政府信息系統(tǒng)形成“數(shù)據(jù)煙囪”，橫向上部門間各業(yè)務(wù)條塊則自建系統(tǒng)形成“數(shù)據(jù)孤島”，政府公共信息資源的存儲(chǔ)彼此獨(dú)立、管理分散02作為政府最重要資產(chǎn)之一的政務(wù)數(shù)據(jù)，因?yàn)閿?shù)據(jù)量太大、太散、難以有效融合等問題，嚴(yán)重影響到了數(shù)據(jù)價(jià)值的發(fā)揮，大大浪費(fèi)了各地政府部門在信息化系統(tǒng)建設(shè)方面的大量投入034.2.1

數(shù)據(jù)孤島問題企業(yè)的數(shù)據(jù)孤島問題企業(yè)管理職能精細(xì)劃分，信息系統(tǒng)圍繞不同的管理階段和管理職能展開，如客戶管理系統(tǒng)、生產(chǎn)系統(tǒng)、銷售系統(tǒng)、采購系統(tǒng)、訂單系統(tǒng)、倉儲(chǔ)系統(tǒng)和財(cái)務(wù)系統(tǒng)等，所有數(shù)據(jù)被封存在各系統(tǒng)中，讓完整的業(yè)務(wù)鏈上孤島林立，信息的共享、反饋難，數(shù)據(jù)孤島問題是企業(yè)信息化建設(shè)中的最大難題。4.2.2數(shù)據(jù)孤島問題產(chǎn)生的原因政府?dāng)?shù)據(jù)孤島的產(chǎn)生原因有些政府部門錯(cuò)誤地將數(shù)據(jù)資源等同于一般資源，認(rèn)為占有就是財(cái)富，熱衷于搜集，但不愿共享有些部門只盯著自己的數(shù)據(jù)服務(wù)系統(tǒng)，結(jié)果因?yàn)閿?shù)據(jù)標(biāo)準(zhǔn)、系統(tǒng)接口等技術(shù)原因，無法與外單位、外部門聯(lián)通還有些地方，對(duì)大數(shù)據(jù)缺乏頂層設(shè)計(jì)，導(dǎo)致各條線、各部門固有的本位主義作祟，壁壘林立，數(shù)據(jù)無法流動(dòng)4.2.2數(shù)據(jù)孤島問題產(chǎn)生的原因企業(yè)數(shù)據(jù)孤島的產(chǎn)生原因不同企業(yè)之間，屬于不同的經(jīng)營主體，有著各自的利益，彼此之間數(shù)據(jù)不共享，產(chǎn)生企業(yè)之間的數(shù)據(jù)孤島，這種是比較普遍的情況。企業(yè)內(nèi)部也往往會(huì)存在大量數(shù)據(jù)孤島，這些數(shù)據(jù)孤島的形成主要有兩個(gè)方面的原因：以功能為標(biāo)準(zhǔn)的部門劃分導(dǎo)致數(shù)據(jù)孤島01不同類型、不同版本的信息化管理系統(tǒng)導(dǎo)致數(shù)據(jù)孤島024.2.3消除數(shù)據(jù)孤島的重要意義對(duì)政府的意義加強(qiáng)政府?dāng)?shù)據(jù)共享開放和大數(shù)據(jù)服務(wù)能力，促進(jìn)跨領(lǐng)域、跨部門合作，推進(jìn)數(shù)據(jù)信息交換，打破部門壁壘，遏制數(shù)據(jù)孤島和重復(fù)建設(shè)，有助于提高行政效率，轉(zhuǎn)變思維觀念，推動(dòng)傳統(tǒng)的職能型政府轉(zhuǎn)型為服務(wù)型智慧政府。政府?dāng)?shù)據(jù)共享的重要意義表現(xiàn)在以下兩個(gè)方面：有助于提升資源利用率01重要意義有助于推動(dòng)政府轉(zhuǎn)型024.2.3消除數(shù)據(jù)孤島的重要意義對(duì)企業(yè)的意義打通企業(yè)內(nèi)部的數(shù)據(jù)孤島，實(shí)現(xiàn)所有系統(tǒng)數(shù)據(jù)互通共享，對(duì)建立企業(yè)自身的大數(shù)據(jù)平臺(tái)和企業(yè)信息化建設(shè)都有重大意義打通企業(yè)之間的數(shù)據(jù)孤島，實(shí)現(xiàn)不同企業(yè)的數(shù)據(jù)共享，有利于企業(yè)獲得更好的經(jīng)營發(fā)展能力0102意義4.2.4實(shí)現(xiàn)數(shù)據(jù)共享所面臨的挑戰(zhàn)在政府層面的挑戰(zhàn)04數(shù)據(jù)中心共享開放作用不強(qiáng)不會(huì)共享開放03不敢共享開放02不愿共享開放014.2.4實(shí)現(xiàn)數(shù)據(jù)共享所面臨的挑戰(zhàn)在企業(yè)層面的挑戰(zhàn)系統(tǒng)孤島挑戰(zhàn)01

組織架構(gòu)挑戰(zhàn)02數(shù)據(jù)合作挑戰(zhàn)034.2.5推進(jìn)數(shù)據(jù)共享的舉措在政府層面的舉措積極開放政府?dāng)?shù)據(jù)資源，提高政府職能部門之間和具有不同創(chuàng)新資源的主體之間的數(shù)據(jù)共享廣度，促進(jìn)區(qū)域內(nèi)形成“數(shù)據(jù)共享池”要改變政府職能部門“數(shù)據(jù)孤島”現(xiàn)象，立足于數(shù)據(jù)資源的共享互換，設(shè)定相對(duì)明確的數(shù)據(jù)標(biāo)準(zhǔn)，實(shí)現(xiàn)部門之間的數(shù)據(jù)對(duì)接與共享，推進(jìn)在制度創(chuàng)新方面的系統(tǒng)集成化，為科技創(chuàng)新提供必要條件要促進(jìn)準(zhǔn)確及時(shí)的數(shù)據(jù)信息傳遞，提高部門條線管理、“一站式”企業(yè)網(wǎng)上辦事和政府服務(wù)項(xiàng)目“一網(wǎng)通辦”的網(wǎng)絡(luò)信息功能，提高數(shù)據(jù)質(zhì)量的可靠性、穩(wěn)定性與權(quán)威性，增加相關(guān)信息平臺(tái)的使用覆蓋面，讓現(xiàn)存數(shù)據(jù)“連起來”、“用起來”4.2.5推進(jìn)數(shù)據(jù)共享的舉措在企業(yè)層面的舉措在不同企業(yè)之間，建立企業(yè)數(shù)據(jù)共享聯(lián)盟在企業(yè)內(nèi)部，破除“數(shù)據(jù)孤島”,推進(jìn)數(shù)據(jù)融合舉措03數(shù)據(jù)開放Partfour4.3數(shù)據(jù)開放政府開放數(shù)據(jù)的理論基礎(chǔ)政府信息公開與政府?dāng)?shù)據(jù)開放的聯(lián)系與區(qū)別政府?dāng)?shù)據(jù)開放的重要意義我國政府?dāng)?shù)據(jù)開放4.3.1

政府開放數(shù)據(jù)的理論基礎(chǔ)數(shù)據(jù)資產(chǎn)理論同其他資產(chǎn)一樣，數(shù)據(jù)資產(chǎn)也是企業(yè)價(jià)值創(chuàng)造的工具和資本在大數(shù)據(jù)時(shí)代，數(shù)據(jù)已經(jīng)被當(dāng)作一種重要的戰(zhàn)略資源，也可以成為一種資產(chǎn)。數(shù)據(jù)資產(chǎn)是無形資產(chǎn)的延伸，是主要以知識(shí)形態(tài)存在的重要經(jīng)濟(jì)資源，是為其所有者或合法使用者提供某種權(quán)利、優(yōu)勢和效益的固定資產(chǎn)數(shù)據(jù)資產(chǎn)的類型有很多，常見的數(shù)據(jù)資產(chǎn)包括書面技術(shù)新材料、數(shù)據(jù)與文檔、技術(shù)軟件、物理資產(chǎn)（主要指通信協(xié)議類）、員工與客戶（包括競爭對(duì)手）、企業(yè)形象和聲譽(yù)以及服務(wù)等030102作為現(xiàn)代企業(yè)和政府，擁有數(shù)據(jù)的規(guī)模、活性，以及收集、運(yùn)用數(shù)據(jù)的能力，將決定企業(yè)和政府的核心競爭力044.3.1

政府開放數(shù)據(jù)的理論基礎(chǔ)數(shù)據(jù)資產(chǎn)理論從政府?dāng)?shù)據(jù)資產(chǎn)的領(lǐng)域特征來看，其具有與政府職能相結(jié)合后的突出特征，包括：可根據(jù)應(yīng)用需求對(duì)各種格式和類型的政府?dāng)?shù)據(jù)資產(chǎn)進(jìn)行量化處理權(quán)屬更為明晰，主要涉及政府機(jī)構(gòu)自身、法人和個(gè)人的各類數(shù)據(jù)具有經(jīng)濟(jì)效益和社會(huì)效益的雙重價(jià)值01政府機(jī)構(gòu)依其職能可通過多種有效手段和機(jī)制，對(duì)其加以合理、及時(shí)的管控020304可在全社會(huì)領(lǐng)域范圍內(nèi)，進(jìn)行跨行業(yè)、跨組織、跨系統(tǒng)的數(shù)據(jù)交換和傳輸054.3.1

政府開放數(shù)據(jù)的理論基礎(chǔ)數(shù)據(jù)權(quán)理論數(shù)據(jù)權(quán)的概念發(fā)起于英國，主要將其視為信息社會(huì)的一項(xiàng)基本公民權(quán)利，讓政府所擁有的數(shù)據(jù)集能夠被公眾申請和使用，并且按照標(biāo)準(zhǔn)公布數(shù)據(jù)。因此，早期的數(shù)據(jù)權(quán)理念強(qiáng)調(diào)的是公民利用信息的權(quán)利01隨著數(shù)據(jù)的進(jìn)一步開放，大型網(wǎng)絡(luò)公司對(duì)于歷史文獻(xiàn)資料的數(shù)據(jù)化，商業(yè)集團(tuán)對(duì)于客戶資料的搜集，政府部門對(duì)于個(gè)人信息的調(diào)查與掌握，社會(huì)化媒體對(duì)于社會(huì)交往的滲透與呈現(xiàn)，使國家和政府加強(qiáng)了對(duì)數(shù)據(jù)主權(quán)的關(guān)注，并將其納入到數(shù)據(jù)主權(quán)的范疇02數(shù)據(jù)主權(quán)源于信息主權(quán)。信息主權(quán)是國家主權(quán)在信息活動(dòng)中的體現(xiàn)，國家對(duì)于政權(quán)管轄地域內(nèi)任何信息的制造、傳播和交易活動(dòng)，以及相關(guān)的組織和制度擁有最高權(quán)力034.3.1

政府開放數(shù)據(jù)的理論基礎(chǔ)數(shù)據(jù)權(quán)理論數(shù)據(jù)權(quán)包括兩個(gè)方面：數(shù)據(jù)主權(quán)和數(shù)據(jù)權(quán)利01數(shù)據(jù)主權(quán)的主體是國家，是一個(gè)國家獨(dú)立自主對(duì)本國數(shù)據(jù)進(jìn)行管理和利用的權(quán)力02數(shù)據(jù)權(quán)利的主體是公民，是相對(duì)應(yīng)于公民數(shù)據(jù)采集義務(wù)而形成的對(duì)數(shù)據(jù)利用的權(quán)利，這種對(duì)數(shù)據(jù)的利用又是建立在數(shù)據(jù)主權(quán)之下的。只有在數(shù)據(jù)主權(quán)法定框架下，公民才可自由行使數(shù)據(jù)權(quán)利03公民的數(shù)據(jù)權(quán)利，是一項(xiàng)新興的基本人權(quán)，它是信息時(shí)代的產(chǎn)物，是公民個(gè)人的基本權(quán)利。公民數(shù)據(jù)權(quán)的保護(hù)，不僅具有正當(dāng)合理性，而且已經(jīng)成為一種人權(quán)保障的世界性趨勢044.3.1

政府開放數(shù)據(jù)的理論基礎(chǔ)開放政府理論開放政府最早出現(xiàn)在20世紀(jì)50年代信息自由立法的介紹當(dāng)中。1957年P(guān)ark的論文“開放政府原則：依據(jù)憲法的知情權(quán)”中首次提出開放政府理念，其核心是關(guān)于信息自由方面的內(nèi)容隨著很多國家對(duì)信息法案的修訂，尤其在2009年奧巴馬政府公布了《開放政府指令》后，開放政府的理論又被重新提起。2009年1月21日，在關(guān)于政府透明和開放化的備忘錄上，奧巴馬總統(tǒng)指示美國行政管理預(yù)算局局長發(fā)布一份《政府開放指令》，開放政府由此提出自2009年開放政府理念被重新提起后，世界各國都在努力使用信息技術(shù)革新政府，并在2011年建立了以美國領(lǐng)導(dǎo)的“開放政府聯(lián)盟”4.3.2政府信息公開與政府?dāng)?shù)據(jù)開放的聯(lián)系與區(qū)別政府信息公開與政府?dāng)?shù)據(jù)開放是一對(duì)既相互區(qū)別又相互聯(lián)系的概念政府信息公開主要是為了對(duì)公眾知情權(quán)的滿足而出現(xiàn)的，信息公開既可以理解為一項(xiàng)制度，又可以理解為一種行為政府信息公開更側(cè)重對(duì)與公眾相關(guān)信息通過報(bào)紙、互聯(lián)網(wǎng)、電視等媒體的發(fā)布，更強(qiáng)調(diào)程序公開，正義公開仍是難點(diǎn)政府信息公開政府?dāng)?shù)據(jù)開放是政府信息公開的嬗變必然，將開放對(duì)象延伸至原始數(shù)據(jù)的粒度政府?dāng)?shù)據(jù)開放強(qiáng)調(diào)的是數(shù)據(jù)的再利用，公眾可以分享數(shù)據(jù)利用創(chuàng)造的經(jīng)濟(jì)和社會(huì)價(jià)值，并且可以根據(jù)對(duì)數(shù)據(jù)的分析判斷政府的決策是否合理政府?dāng)?shù)據(jù)開放4.3.3政府?dāng)?shù)據(jù)開放的重要意義政府開放數(shù)據(jù)有利于促進(jìn)開放透明政府的形成政府開放數(shù)據(jù)是更高層次的政府信息公開，而政府信息公開也將推動(dòng)政府民主法治進(jìn)程如果說政府信息公開還是處于起步階段，那么政府開放數(shù)據(jù)則是更高層次的政務(wù)公開0102數(shù)據(jù)是政府手中的重要資源，政府開放數(shù)據(jù)的范圍、程度、速度都代表著政府開放的程度034.3.3政府?dāng)?shù)據(jù)開放的重要意義政府開放數(shù)據(jù)有利于創(chuàng)新創(chuàng)業(yè)和經(jīng)濟(jì)增長美國是氣象災(zāi)害頻發(fā)的國家，為減少氣象災(zāi)害帶來的嚴(yán)重?fù)p失，2014年3月，美國白宮宣布：將氣象數(shù)據(jù)發(fā)布在D上，隨后，與氣象相關(guān)的企業(yè)服務(wù)應(yīng)運(yùn)而生，包括各種氣象播報(bào)、氣象顧問、氣象保險(xiǎn)等，形成了一個(gè)新的產(chǎn)業(yè)鏈，創(chuàng)造出了極高的經(jīng)濟(jì)價(jià)值01政府?dāng)?shù)據(jù)的再利用，在歐洲也創(chuàng)造出很高的經(jīng)濟(jì)價(jià)值。2010年歐盟公布的數(shù)據(jù)顯示，歐洲利用政府公開的數(shù)據(jù)創(chuàng)造出的價(jià)值就達(dá)到320億歐元，同時(shí)帶來了更多的商業(yè)和就業(yè)機(jī)會(huì)024.3.3政府?dāng)?shù)據(jù)開放的重要意義政府開放數(shù)據(jù)有利于社會(huì)治理創(chuàng)新政府?dāng)?shù)據(jù)的開放不僅打破了政府部門對(duì)數(shù)據(jù)的壟斷，促進(jìn)了數(shù)據(jù)價(jià)值的最大發(fā)揮，同時(shí)也構(gòu)建起了政府同市場、社會(huì)、公眾之間互動(dòng)的平臺(tái)數(shù)據(jù)分享和大數(shù)據(jù)技術(shù)應(yīng)用，不僅可以有效推動(dòng)政府各部門在公共活動(dòng)中實(shí)現(xiàn)協(xié)同治理，提高政府決策的水平，也能夠充分調(diào)動(dòng)各方的積極性來完成社會(huì)事務(wù)，實(shí)現(xiàn)社會(huì)治理機(jī)制的創(chuàng)新，給公眾的生活帶來便利，比如緩解交通壓力、增強(qiáng)食品安全、解決環(huán)境污染等4.3.4我國政府?dāng)?shù)據(jù)開放概述通過開放各類獎(jiǎng)懲信息，可以提高社會(huì)信用通過開放決策過程數(shù)據(jù)，可以提高政府的公信力通過開放商業(yè)數(shù)據(jù)，可以驅(qū)動(dòng)經(jīng)濟(jì)轉(zhuǎn)型030102通過開放社會(huì)統(tǒng)計(jì)基礎(chǔ)數(shù)據(jù)，可以促進(jìn)社會(huì)發(fā)展科學(xué)化044.3.4我國政府?dāng)?shù)據(jù)開放我國政府?dāng)?shù)據(jù)開放制度體系我國政府?dāng)?shù)據(jù)開放監(jiān)督制度包括投訴舉報(bào)、工作考核和社會(huì)評(píng)議等內(nèi)容，行為制度由政府?dāng)?shù)據(jù)開放方式、標(biāo)準(zhǔn)以及要素等內(nèi)容構(gòu)成，保障制度含行政復(fù)議、行政訴訟和責(zé)任追究等措施，內(nèi)容制度涵蓋政府?dāng)?shù)據(jù)開放的事項(xiàng)、范圍以及程度等各個(gè)方面。4.3.4我國政府?dāng)?shù)據(jù)開放公共數(shù)據(jù)授權(quán)運(yùn)營公共數(shù)據(jù)是指政府和公共部門持有的數(shù)據(jù)，范圍包括：職能履行受公共財(cái)政保障的機(jī)關(guān)單位在依法履行公共管理職責(zé)或提供公共服務(wù)過程中收集、產(chǎn)生的數(shù)據(jù)（即來自政務(wù)體系的公共數(shù)據(jù)）01受公共財(cái)政支持、無行政職能的非營利事業(yè)單位或社會(huì)組織在公共利益領(lǐng)域內(nèi)收集、產(chǎn)生的數(shù)據(jù)（即來自科教文衛(wèi)等公共事業(yè)的公共數(shù)據(jù)）02公共服務(wù)運(yùn)營單位在提供供水、供電、供氣、公共交通等公共服務(wù)的過程中收集、產(chǎn)生的數(shù)據(jù)。03公共數(shù)據(jù)授權(quán)運(yùn)營作為數(shù)據(jù)要素產(chǎn)業(yè)乃至數(shù)字經(jīng)濟(jì)發(fā)展的重要拼圖，肩負(fù)起盤活數(shù)據(jù)要素、釋放產(chǎn)業(yè)價(jià)值的重任4.3.4我國政府?dāng)?shù)據(jù)開放公共數(shù)據(jù)授權(quán)運(yùn)營公共數(shù)據(jù)授權(quán)運(yùn)營主要有三種模式：行業(yè)數(shù)據(jù)管理機(jī)構(gòu)授權(quán)企業(yè)統(tǒng)一運(yùn)營01地方數(shù)據(jù)分類授權(quán)垂直領(lǐng)域數(shù)據(jù)運(yùn)營方03地方數(shù)據(jù)整體授權(quán)綜合數(shù)據(jù)運(yùn)營方02當(dāng)前我國公共數(shù)據(jù)運(yùn)營主要面臨三個(gè)挑戰(zhàn)：規(guī)?；臄?shù)據(jù)資源匯聚挑戰(zhàn)成熟的市場化路徑有待探索構(gòu)建起完善的保障體系4.3.4我國政府?dāng)?shù)據(jù)開放公共數(shù)據(jù)授權(quán)運(yùn)營公共數(shù)據(jù)的授權(quán)運(yùn)營是公共數(shù)據(jù)社會(huì)化流通賦能實(shí)體經(jīng)濟(jì)的關(guān)鍵路徑，以及探索數(shù)據(jù)要素全面市場化的關(guān)鍵突破口01當(dāng)前，北京、上海、深圳、杭州、德陽、大理等地紛紛出臺(tái)公共數(shù)據(jù)相關(guān)政策，授權(quán)有條件的運(yùn)營主體，積極開展公共數(shù)據(jù)運(yùn)營的落地工作。目前，各地政府在探索中尤為看重兩個(gè)方面：即公共數(shù)據(jù)授權(quán)運(yùn)營體系的建立，以及如何將授權(quán)運(yùn)營體系在實(shí)踐中落在實(shí)處02公共數(shù)據(jù)授權(quán)運(yùn)營是一項(xiàng)具有系統(tǒng)性、復(fù)雜性的新生業(yè)態(tài)，涉及到數(shù)據(jù)要素高質(zhì)量供給、數(shù)據(jù)要素開發(fā)利用、數(shù)據(jù)要素市場流通三大環(huán)節(jié)，除了運(yùn)營體系的創(chuàng)新之外，良好的生態(tài)也是其長效化運(yùn)行的關(guān)鍵所在0304大數(shù)據(jù)交易Partfive4.4大數(shù)據(jù)交易概述大數(shù)據(jù)交易發(fā)展現(xiàn)狀數(shù)據(jù)產(chǎn)權(quán)制度4.4.1概述大數(shù)據(jù)交易應(yīng)當(dāng)是買賣數(shù)據(jù)的活動(dòng)，是以貨幣為交易媒介獲取數(shù)據(jù)這種商品的過程，具有3種特征：標(biāo)的物受到嚴(yán)格的限制，只有經(jīng)過處理之后的數(shù)據(jù)才能交易01涉及的主體眾多，包括數(shù)據(jù)提供方、數(shù)據(jù)購買方、數(shù)據(jù)平臺(tái)等02交易過程繁瑣，涉及大數(shù)據(jù)的多個(gè)產(chǎn)業(yè)鏈，如數(shù)據(jù)源的獲取、數(shù)據(jù)安全的保障、數(shù)據(jù)的后續(xù)利用等034.4.1概述目前進(jìn)行數(shù)據(jù)交易的形式有以下幾種：大數(shù)據(jù)交易公司數(shù)據(jù)交易所API模式其他大數(shù)據(jù)交易是大數(shù)據(jù)產(chǎn)業(yè)生態(tài)系統(tǒng)中的重要一環(huán)，與大數(shù)據(jù)交易相關(guān)的其他環(huán)節(jié)包括數(shù)據(jù)源、大數(shù)據(jù)硬件層、大數(shù)據(jù)技術(shù)層、大數(shù)據(jù)應(yīng)用層、大數(shù)據(jù)衍生層等。4.4.2大數(shù)據(jù)交易發(fā)展現(xiàn)狀數(shù)據(jù)交易由來已久，并不是最近幾年才出現(xiàn)的新型交易方式；進(jìn)入大數(shù)據(jù)時(shí)代以后，大數(shù)據(jù)資源愈加豐富；龐大的大數(shù)據(jù)資源為大數(shù)據(jù)交易的興起奠定了堅(jiān)實(shí)的基礎(chǔ)。4.4.2大數(shù)據(jù)交易發(fā)展現(xiàn)狀在政策的引導(dǎo)下，2014年以來，國內(nèi)不僅出現(xiàn)了數(shù)據(jù)堂、京東萬象、中關(guān)村數(shù)海、浪潮卓數(shù)、聚合數(shù)據(jù)等一批數(shù)據(jù)交易平臺(tái)，各地方政府也成立了混合所有制形式的數(shù)據(jù)交易機(jī)構(gòu)，包括：貴陽大數(shù)據(jù)交易所上海數(shù)據(jù)交易中心長江大數(shù)據(jù)交易中心(武漢)浙江大數(shù)據(jù)交易中心北京國際大數(shù)據(jù)交易所北部灣大數(shù)據(jù)交易中心湖南大數(shù)據(jù)交易所北方大數(shù)據(jù)交易中心福建大數(shù)據(jù)交易所4.4.3數(shù)據(jù)產(chǎn)權(quán)制度沒有歸屬清晰、合規(guī)使用、保障權(quán)益的數(shù)據(jù)產(chǎn)權(quán)制度，就無法形成高效公平、安全可控的數(shù)據(jù)要素市場。數(shù)據(jù)要素市場運(yùn)行的前提是產(chǎn)權(quán)配置清晰，確立數(shù)據(jù)產(chǎn)權(quán)制度，需要解決數(shù)據(jù)產(chǎn)權(quán)在兩大層面的清晰問題：數(shù)據(jù)在法律層面的清晰01數(shù)據(jù)在經(jīng)濟(jì)層面的清晰01國家發(fā)展和改革委員會(huì)提出構(gòu)建數(shù)據(jù)產(chǎn)權(quán)制度的主要思路：探索數(shù)據(jù)產(chǎn)權(quán)結(jié)構(gòu)性分置制度建立健全數(shù)據(jù)要素各參與方合法權(quán)益保護(hù)制度數(shù)據(jù)分類分級(jí)確權(quán)授權(quán)，主要針對(duì)數(shù)據(jù)持有主體——公共數(shù)據(jù)、企業(yè)數(shù)據(jù)和個(gè)人數(shù)據(jù)。0102034.4.3數(shù)據(jù)產(chǎn)權(quán)制度“數(shù)據(jù)二十條”提出探索數(shù)據(jù)產(chǎn)權(quán)結(jié)構(gòu)性分置制度，“建立數(shù)據(jù)資源持有權(quán)、數(shù)據(jù)加工使用權(quán)、數(shù)據(jù)產(chǎn)品經(jīng)營權(quán)等分置的產(chǎn)權(quán)運(yùn)行機(jī)制”,并指出推進(jìn)實(shí)施公共數(shù)據(jù)確權(quán)授權(quán)機(jī)制、推動(dòng)建立企業(yè)數(shù)據(jù)確權(quán)授權(quán)機(jī)制、建立健全個(gè)人數(shù)據(jù)確權(quán)授權(quán)機(jī)制01“數(shù)據(jù)二十條”對(duì)公共數(shù)據(jù)、企業(yè)數(shù)據(jù)、個(gè)人數(shù)據(jù)的確權(quán)授權(quán)提出系列性指導(dǎo)意見，也為構(gòu)建數(shù)據(jù)產(chǎn)權(quán)制度提供了發(fā)展方向和主要思路02縱觀國內(nèi)現(xiàn)有與數(shù)據(jù)產(chǎn)權(quán)權(quán)屬相關(guān)的研究，主要有隱私權(quán)說、新型人格權(quán)說、知識(shí)產(chǎn)權(quán)說三種。每種理論的解釋都有其合理性和一定缺陷0305大數(shù)據(jù)安全Partsix4.5大數(shù)據(jù)安全傳統(tǒng)數(shù)據(jù)安全大數(shù)據(jù)安全與傳統(tǒng)數(shù)據(jù)安全的不同大數(shù)據(jù)安全問題典型案例4.5.1傳統(tǒng)數(shù)據(jù)安全01計(jì)算機(jī)病毒03數(shù)據(jù)信息存儲(chǔ)介質(zhì)的損壞02黑客攻擊傳統(tǒng)數(shù)據(jù)安全4.5.2大數(shù)據(jù)安全與傳統(tǒng)數(shù)據(jù)安全的不同大數(shù)據(jù)加大隱私泄露風(fēng)險(xiǎn)大數(shù)據(jù)成為網(wǎng)絡(luò)攻擊的顯著目標(biāo)傳統(tǒng)“老三樣”防御手段面臨挑戰(zhàn)01大數(shù)據(jù)技術(shù)被應(yīng)用到攻擊手段中020304大數(shù)據(jù)成為高級(jí)可持續(xù)攻擊（APT）的載體054.5.3大數(shù)據(jù)安全問題隱私和個(gè)人信息安全問題傳統(tǒng)的隱私是隱蔽、不公開的私事，實(shí)際上是個(gè)人的秘密。大數(shù)據(jù)時(shí)代的隱私與傳統(tǒng)不同，內(nèi)容更多，分為個(gè)人信息、個(gè)人事務(wù)、個(gè)人領(lǐng)域，即隱私是一種與公共利益、群體利益無關(guān)，當(dāng)事人不愿他人知道或他人不便知道的個(gè)人信息，當(dāng)事人不愿他人干涉或他人不便干涉的個(gè)人私事，以及當(dāng)事人不愿他人侵入或他人不便侵入的個(gè)人領(lǐng)域。隱私是客觀存在的個(gè)人自然權(quán)利01在大數(shù)據(jù)時(shí)代，個(gè)人身份、健康狀況、個(gè)人信用和財(cái)產(chǎn)狀況以及自己和戀人的親密過程是隱私；使用設(shè)備、位置信息、電子郵件也是隱私；同時(shí)上網(wǎng)瀏覽情況、應(yīng)用的APP、在網(wǎng)上參加的活動(dòng)、發(fā)表及閱讀什么帖子、點(diǎn)贊，也可能成為隱私024.5.3大數(shù)據(jù)安全問題企業(yè)數(shù)據(jù)安全問題邁進(jìn)大數(shù)據(jù)時(shí)代,企業(yè)信息安全面臨多重挑戰(zhàn)。企業(yè)在獲得大數(shù)據(jù)時(shí)代信息價(jià)值增益的同時(shí),其風(fēng)險(xiǎn)也在不斷地累積,大數(shù)據(jù)安全方面的挑戰(zhàn)日益增大01黑客竊密與病毒木馬會(huì)入侵企業(yè)信息系統(tǒng),大數(shù)據(jù)在云系統(tǒng)中進(jìn)行上傳、下載、交換的同時(shí),極易成為黑客的攻擊對(duì)象。而大數(shù)據(jù)一旦被入侵并產(chǎn)生泄密,就會(huì)對(duì)企業(yè)的品牌、信譽(yù)、研發(fā)、銷售等多方面造成嚴(yán)重沖擊以及難以估量的損失02通常,那些對(duì)大數(shù)據(jù)分析有較高要求的企業(yè),會(huì)面臨更多的挑戰(zhàn)034.5.3大數(shù)據(jù)安全問題國家安全問題大數(shù)據(jù)作為一種社會(huì)資源，不僅給互聯(lián)網(wǎng)領(lǐng)域帶來變革，同時(shí)也給全球的政治、經(jīng)濟(jì)、軍事、文化、生態(tài)等帶來影響，已經(jīng)成為衡量綜合國力的重要標(biāo)準(zhǔn)。大數(shù)據(jù)事關(guān)國家主權(quán)和安全，必須加以高度重視。大數(shù)據(jù)成為國家之間博弈的新戰(zhàn)場自媒體平臺(tái)成為影響國家意識(shí)形態(tài)安全的重要因素01024.5.4典型案例棱鏡門事件美國政府2014年5月發(fā)布的大數(shù)據(jù)報(bào)告：大數(shù)據(jù)可以極大增強(qiáng)國家安全保證能力。美國前國防部長拉姆斯菲爾德多次強(qiáng)調(diào)：

一枚導(dǎo)彈沒有一條情報(bào)能更有效地應(yīng)對(duì)恐怖活動(dòng)。4.5.4典型案例手機(jī)應(yīng)用軟件過度采集個(gè)人信息在我們的日常生活中，部分手機(jī)APP往往會(huì)“私自竊密”。在微信朋友圈廣泛傳播的各種測試小程序，也可能在竊取用戶個(gè)人信息。在朋友圈傳播的測試小程序4.5.4典型案例免費(fèi)WiFi竊取用戶信息曾經(jīng)有黑客在某網(wǎng)絡(luò)論壇發(fā)帖稱，只需要一臺(tái)電腦、一套無線網(wǎng)絡(luò)設(shè)備和一個(gè)網(wǎng)絡(luò)包分析軟件，他就能輕松地搭建出一個(gè)不設(shè)密碼的WiFi網(wǎng)絡(luò)，而一旦其他用戶用移動(dòng)設(shè)備連接上這個(gè)WiFi，之后再使用手機(jī)瀏覽器登陸電子郵箱、網(wǎng)絡(luò)論壇等賬號(hào)時(shí)，他就能很快分析出該用戶的各種密碼，進(jìn)而竊取用戶的私密信息，甚至利用用戶的QQ、微博、微信等通訊工具發(fā)布廣告詐騙信息。06大數(shù)據(jù)應(yīng)用Partseven目錄4.6.1大數(shù)據(jù)在互聯(lián)網(wǎng)領(lǐng)域的應(yīng)用4.6.2大數(shù)據(jù)在生物醫(yī)學(xué)領(lǐng)域的應(yīng)用4.6.3大數(shù)據(jù)在物流領(lǐng)域的應(yīng)用4.6.4大數(shù)據(jù)在城市管理領(lǐng)域的應(yīng)用4.6.5大數(shù)據(jù)在金融領(lǐng)域的應(yīng)用4.6.6大數(shù)據(jù)在汽車領(lǐng)域的應(yīng)用4.6.7大數(shù)據(jù)在電信領(lǐng)域的應(yīng)用4.6.8大數(shù)據(jù)在能源領(lǐng)域的應(yīng)用4.6.1大數(shù)據(jù)在互聯(lián)網(wǎng)領(lǐng)域的應(yīng)用互聯(lián)網(wǎng)的飛速發(fā)展使我們進(jìn)入了信息過載的時(shí)代，搜索引擎可以幫助我們查找內(nèi)容，但只能解決明確的需求為了讓用戶從海量信息中高效地獲得自己所需的信息，推薦系統(tǒng)應(yīng)運(yùn)而生推薦系統(tǒng)是大數(shù)據(jù)在互聯(lián)網(wǎng)領(lǐng)域的典型應(yīng)用，它可以通過分析用戶的歷史記錄來了解用戶的喜好，從而主動(dòng)為用戶推薦其感興趣的信息，滿足用戶的個(gè)性化推薦需求推薦系統(tǒng)是自動(dòng)聯(lián)系用戶和物品的一種工具，和搜索引擎相比，推薦系統(tǒng)通過研究用戶的興趣偏好，進(jìn)行個(gè)性化計(jì)算。推薦系統(tǒng)可發(fā)現(xiàn)用戶的興趣點(diǎn)，幫助用戶從海量信息中去發(fā)掘自己潛在的需求4.6.2大數(shù)據(jù)在生物醫(yī)學(xué)領(lǐng)域的應(yīng)用從谷歌流感趨勢看大數(shù)據(jù)的應(yīng)用價(jià)值：“谷歌流感趨勢”，通過跟蹤搜索詞相關(guān)數(shù)據(jù)來判斷全美地區(qū)的流感情況1.流行病預(yù)測4.6.2大數(shù)據(jù)在生物醫(yī)學(xué)領(lǐng)域的應(yīng)用促進(jìn)優(yōu)質(zhì)醫(yī)療資源共享促進(jìn)醫(yī)療智能化避免患者重復(fù)檢查2.智慧醫(yī)療4.6.2大數(shù)據(jù)在生物醫(yī)學(xué)領(lǐng)域的應(yīng)用生物信息學(xué)是研究生物信息的采集、處理、存儲(chǔ)、傳播、分析和解釋等方面的學(xué)科，也是隨著生命科學(xué)和計(jì)算機(jī)科學(xué)的迅猛發(fā)展、生命科學(xué)和計(jì)算機(jī)科學(xué)相結(jié)合形成的一門新學(xué)科，它通過綜合利用生物學(xué)、計(jì)算機(jī)科學(xué)和信息技術(shù)，揭示大量而復(fù)雜的生物數(shù)據(jù)所蘊(yùn)含的生物學(xué)奧秘和互聯(lián)網(wǎng)數(shù)據(jù)相比，生物信息學(xué)領(lǐng)域的數(shù)據(jù)更是典型的大數(shù)據(jù)生物大數(shù)據(jù)使得我們可以利用先進(jìn)的數(shù)據(jù)科學(xué)知識(shí)，更加深入地了解生物學(xué)過程、作物表型、疾病致病基因等用大數(shù)據(jù)分析技術(shù)，可以從個(gè)人健康檔案中有效預(yù)測個(gè)人健康趨勢，并為其提供疾病預(yù)防建議，達(dá)到“治未病”的目的3.生物信息學(xué)4.6.3大數(shù)據(jù)在物流領(lǐng)域的應(yīng)用智能物流,又稱智慧物流，是利用集成智能化技術(shù)，使物流系統(tǒng)能模仿人的智能，具有思維、感知、學(xué)習(xí)、推理判斷和自行解決物流中某些問題的能力，從而實(shí)現(xiàn)物流資源優(yōu)化調(diào)度和有效配置、物流系統(tǒng)效率提升的現(xiàn)代化物流管理模式1.智能物流的概念4.6.3大數(shù)據(jù)在物流領(lǐng)域的應(yīng)用在物流領(lǐng)域有兩個(gè)著名的理論——“黑大陸說”和“物流冰山說”。這兩個(gè)理論都旨在說明物流活動(dòng)的模糊性和巨大潛力，發(fā)現(xiàn)隱藏在海量數(shù)據(jù)背后的有價(jià)值的信息，是大數(shù)據(jù)的重要商業(yè)價(jià)值。大數(shù)據(jù)是打開物流領(lǐng)域這塊神秘的“黑大陸”的一把金鑰匙大數(shù)據(jù)將推動(dòng)物流行業(yè)從粗放式服務(wù)到個(gè)性化服務(wù)的轉(zhuǎn)變，顛覆整個(gè)物流行業(yè)的商業(yè)模式“黑大陸”理論提出者美國管理學(xué)權(quán)威彼得F.德魯克2

大數(shù)據(jù)是智能物流的關(guān)鍵4.6.4大數(shù)據(jù)在城市管理領(lǐng)域的應(yīng)用智能交通將先進(jìn)的信息技術(shù)、數(shù)據(jù)通信傳輸技術(shù)、電子傳感技術(shù)、控制技術(shù)以及計(jì)算機(jī)技術(shù)等，有效集成并運(yùn)用于整個(gè)地面交通管理，同時(shí)可以利用城市實(shí)時(shí)交通信息、社交網(wǎng)絡(luò)和天氣數(shù)據(jù)來優(yōu)化最新的交通情況1.

智能交通4.6.4大數(shù)據(jù)在城市管理領(lǐng)域的應(yīng)用森林監(jiān)視近年來，人們開始把大數(shù)據(jù)應(yīng)用于森林監(jiān)視，其中，谷歌森林監(jiān)視就是一項(xiàng)具有代表性的研究成果谷歌森林監(jiān)視系統(tǒng)采用谷歌搜索引擎提供時(shí)間分辨率，采用NASA和美國地質(zhì)勘探局的地球資源衛(wèi)星提供空間分辨率。系統(tǒng)利用衛(wèi)星的可見光和紅外數(shù)據(jù)畫出某個(gè)地點(diǎn)的森林衛(wèi)星圖像。在衛(wèi)星圖像中，每個(gè)像素都包含了顏色和紅外信號(hào)特征等信息，如果某個(gè)區(qū)域的森林被破壞，該區(qū)域?qū)?yīng)的衛(wèi)星圖像像素信息就會(huì)發(fā)生變化；因此，通過跟蹤監(jiān)測森林衛(wèi)星圖像上像素信息的變化，就可以有效監(jiān)測到森林變化情況，當(dāng)大片森林被砍伐破壞時(shí)，系統(tǒng)就會(huì)自動(dòng)發(fā)出警報(bào)2.環(huán)保監(jiān)測4.6.4大數(shù)據(jù)在城市管理領(lǐng)域的應(yīng)用環(huán)境保護(hù)大數(shù)據(jù)已經(jīng)被廣泛應(yīng)用于污染監(jiān)測領(lǐng)域，借助大數(shù)據(jù)技術(shù)，采集各項(xiàng)環(huán)境質(zhì)量指標(biāo)信息，集成整合到數(shù)據(jù)中心進(jìn)行數(shù)據(jù)分析，并把分析結(jié)果用于指導(dǎo)下一步環(huán)境治理方案的制定，可以有效提升環(huán)境整治的效果中國水污染地圖中國空氣污染地圖中國固廢污染地圖汽車尾氣污染治理2.環(huán)保監(jiān)測4.6.4大數(shù)據(jù)在城市管理領(lǐng)域的應(yīng)用地理數(shù)據(jù)利用地理數(shù)據(jù)可以研究全國城市擴(kuò)張模擬、城市建成區(qū)識(shí)別公交IC卡數(shù)據(jù)手機(jī)通話數(shù)據(jù)社交網(wǎng)絡(luò)數(shù)據(jù)住房數(shù)據(jù)利用搜房網(wǎng)的住房銷售和出租數(shù)據(jù)，同時(shí)結(jié)合網(wǎng)絡(luò)爬蟲獲取的居民住房地理位置和周邊設(shè)施條件數(shù)據(jù)，就可以評(píng)價(jià)一個(gè)城區(qū)的住房分布和質(zhì)量情況利用公交IC卡數(shù)據(jù)，可以開展城市居民通勤分析、職住分析、人的行為分析、人的識(shí)別、重大事件影響分析、規(guī)劃項(xiàng)目實(shí)施評(píng)估分析?等利用移動(dòng)手機(jī)通話數(shù)據(jù)，可以研究城市聯(lián)系、居民屬性、活動(dòng)關(guān)系及其對(duì)城市交通的影響利用社交網(wǎng)絡(luò)數(shù)據(jù)，可以研究城市功能分區(qū)、城市網(wǎng)絡(luò)活動(dòng)與等級(jí)、城市社會(huì)網(wǎng)絡(luò)體系等。利用出租車定位數(shù)據(jù)，可以開展城市交通研究3.城市規(guī)劃4.6.4大數(shù)據(jù)在城市管理領(lǐng)域的應(yīng)用中國的很多城市都在開展平安城市建設(shè)，在城市的各個(gè)角落密布成千上萬個(gè)攝像頭，7×24小時(shí)不間斷采集各個(gè)位置的視頻監(jiān)控?cái)?shù)據(jù)，數(shù)據(jù)量之大，超乎想象除了視頻監(jiān)控?cái)?shù)據(jù)，安防領(lǐng)域還包含大量其他類型的數(shù)據(jù)，包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)4.安防領(lǐng)域4.6.5大數(shù)據(jù)在金融領(lǐng)域的應(yīng)用高頻交易（High-FrequencyTrading，HFT）是指從那些人們無法利用的極為短暫的市場變化中尋求獲利的計(jì)算機(jī)化交易，比如，某種證券買入價(jià)和賣出價(jià)差價(jià)的微小變化，或者某只股票在不同交易所之間的微小價(jià)差為了從高頻交易中獲得更高的利潤，一些金融機(jī)構(gòu)開始引入大數(shù)據(jù)技術(shù)來決定交易1.高頻交易4.6.5大數(shù)據(jù)在金融領(lǐng)域的應(yīng)用市場情緒分析是交易者在日常交易工作中不可或缺的一環(huán)，根據(jù)市場情緒分析、技術(shù)分析和基本面分析，可以幫助交易者做出更好的決策。大數(shù)據(jù)技術(shù)在市場情緒分析中大有用武之地2.市場情緒分析4.6.5大數(shù)據(jù)在金融領(lǐng)域的應(yīng)用大數(shù)據(jù)分析技術(shù)已經(jīng)能夠?yàn)槠髽I(yè)信貸風(fēng)險(xiǎn)分析助一臂之力。通過收集和分析大量中小微企業(yè)用戶日常交易行為的數(shù)據(jù)，判斷其業(yè)務(wù)范疇、經(jīng)營狀況、信用狀況、用戶定位、資金需求和行業(yè)發(fā)展趨勢，解決由于其財(cái)務(wù)制度的不健全而無法真正了解其真實(shí)經(jīng)營狀況的難題，讓金融機(jī)構(gòu)放貸有信心、管理有保障收集和分析大量中小微企業(yè)用戶日常交易行為的數(shù)據(jù)解決由于其財(cái)務(wù)制度的不健全而無法真正了解其真實(shí)經(jīng)營狀況的難題，讓金融機(jī)構(gòu)放貸有信心、管理有保障判斷業(yè)務(wù)范疇經(jīng)營狀況信用狀況用戶定位資金需求行業(yè)發(fā)展趨勢3.信貸風(fēng)險(xiǎn)分析4.6.5大數(shù)據(jù)在金融領(lǐng)域的應(yīng)用大數(shù)據(jù)征信就是利用信息技術(shù)優(yōu)勢，將不同信貸機(jī)構(gòu)、消費(fèi)場景、支離破碎的海量數(shù)據(jù)整合起來，經(jīng)過數(shù)據(jù)清洗、模型分析、校驗(yàn)等一系列流程后，加工融合成真正有用的信息4.大數(shù)據(jù)征信4.6.6大數(shù)據(jù)在汽車領(lǐng)域的應(yīng)用為了實(shí)現(xiàn)無人駕駛的功能，谷歌無人駕駛汽車上配備了大量傳感器，包括雷達(dá)、車道保持系統(tǒng)、激光測距系統(tǒng)、紅外攝像頭、立體視覺、GPS導(dǎo)航系統(tǒng)、車輪角度編碼器等，這些傳感器每秒產(chǎn)生1GB數(shù)據(jù)，每年產(chǎn)生的數(shù)據(jù)量將達(dá)到約2PB大數(shù)據(jù)分析技術(shù)將幫助無人駕駛系統(tǒng)做出更加智能的駕駛動(dòng)作決策，比人類駕車更加安全、舒適、節(jié)能、環(huán)保4.6.7大數(shù)據(jù)在電信領(lǐng)域的應(yīng)用預(yù)測客戶行為，發(fā)現(xiàn)行為趨勢，并找出公司服務(wù)過程中存在缺陷的環(huán)節(jié)，從而幫助公司及時(shí)采取措施保留客戶電信客戶離網(wǎng)分析4.6.8大數(shù)據(jù)在能源領(lǐng)域的應(yīng)用智能電網(wǎng)的發(fā)展，離不開大數(shù)據(jù)技術(shù)的發(fā)展和應(yīng)用，大數(shù)據(jù)技術(shù)是組成整個(gè)智能電網(wǎng)的技術(shù)基石本章小結(jié)本章全面而深入地探討了大數(shù)據(jù)的核心要素及其在社會(huì)經(jīng)濟(jì)各領(lǐng)域的廣泛應(yīng)用。大數(shù)據(jù)交易市場的興起，促進(jìn)了數(shù)據(jù)資源的有效配置與利用大數(shù)據(jù)應(yīng)用已經(jīng)廣泛滲透各行各業(yè)，從精準(zhǔn)營銷到智慧城市，從醫(yī)療健康到智能制造，正深刻改變著我們的生活方式與社會(huì)運(yùn)行模式大數(shù)據(jù)思維顛覆了傳統(tǒng)的思維方式，帶來了全新的問題解決方式。數(shù)據(jù)共享與開放成為促進(jìn)信息流通、激發(fā)創(chuàng)新的關(guān)鍵，它們打破了數(shù)據(jù)孤島，為社會(huì)經(jīng)濟(jì)發(fā)展注入新活力010305大數(shù)據(jù)安全不容忽視，需構(gòu)建全方位防護(hù)體系，確保數(shù)據(jù)隱私與國家安全0204總體而言，本章為讀者提供了大數(shù)據(jù)時(shí)代的全景圖，激發(fā)了對(duì)大數(shù)據(jù)價(jià)值深度挖掘與應(yīng)用的廣泛思考林子雨副教授謝謝觀看！廈門大學(xué)附錄A：主講教師林子雨簡介單位：廈門大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)系E-mail:ziyulin@個(gè)人網(wǎng)頁：/post/linziyu數(shù)據(jù)庫實(shí)驗(yàn)室網(wǎng)站：主講教師：林子雨林子雨，男，1978年出生，博士（畢業(yè)于北京大學(xué)），全國高校知名大數(shù)據(jù)教師，入選“2021年高校計(jì)算機(jī)專業(yè)優(yōu)秀教師獎(jiǎng)勵(lì)計(jì)劃”?，F(xiàn)為廈門大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)系副教授，廈門大學(xué)信息學(xué)院實(shí)驗(yàn)教學(xué)中心主任，曾任廈門大學(xué)信息科學(xué)與技術(shù)學(xué)院院長助理、晉江市發(fā)展和改革局副局長。中國計(jì)算機(jī)學(xué)會(huì)數(shù)據(jù)庫專業(yè)委員會(huì)執(zhí)行委員，中國計(jì)算機(jī)學(xué)會(huì)信息系統(tǒng)專業(yè)委員會(huì)執(zhí)行委員。國內(nèi)高校首個(gè)“數(shù)字教師”提出者和建設(shè)者，廈門大學(xué)數(shù)據(jù)庫實(shí)驗(yàn)室負(fù)責(zé)人，廈門大學(xué)云計(jì)算與大數(shù)據(jù)研究中心主要建設(shè)者和骨干成員，2013年度、2017年度、2020年度和2023年度廈門大學(xué)教學(xué)類獎(jiǎng)教金獲得者，榮獲2024年福建省高等教育教學(xué)成果獎(jiǎng)特等獎(jiǎng)（個(gè)人排名第七）、2022年福建省高等教育教學(xué)成果獎(jiǎng)特等獎(jiǎng)（個(gè)人排名第一）、2018年福建省高等教育教學(xué)成果獎(jiǎng)二等獎(jiǎng)（個(gè)人排名第一）、2018年國家精品在線開放課程、2021年國家級(jí)線上一流本科課程、2020年國家級(jí)線上一流本科課程。主要研究方向?yàn)閿?shù)據(jù)庫、數(shù)據(jù)倉庫、數(shù)據(jù)挖掘、大數(shù)據(jù)、云計(jì)算和物聯(lián)網(wǎng)，并以第一作者身份在《軟件學(xué)報(bào)》《計(jì)算機(jī)學(xué)報(bào)》和《計(jì)算機(jī)研究與發(fā)展》等國家重點(diǎn)期刊以及國際學(xué)術(shù)會(huì)議上發(fā)表多篇學(xué)術(shù)論文。作為項(xiàng)目負(fù)責(zé)人主持的科研項(xiàng)目包括1項(xiàng)國家自然科學(xué)青年基金項(xiàng)目(No.61303004)、1項(xiàng)福建省自然科學(xué)青年基金項(xiàng)目(No.2013J05099)和1項(xiàng)中央高?；究蒲袠I(yè)務(wù)費(fèi)項(xiàng)目(No.2011121049)，主持的教改課題包括1項(xiàng)2016年福建省教改課題、1項(xiàng)2016年教育部產(chǎn)學(xué)協(xié)作育人項(xiàng)目、1項(xiàng)2024年教育部產(chǎn)學(xué)協(xié)作育人項(xiàng)目。編著出版了《大數(shù)據(jù)技術(shù)原理與應(yīng)用》等13本大數(shù)據(jù)系列教材，被國內(nèi)1000多所高校采用；建設(shè)了國內(nèi)高校首個(gè)大數(shù)據(jù)課程公共服務(wù)平臺(tái)，為教師教學(xué)和學(xué)生學(xué)習(xí)大數(shù)據(jù)課程提供全方位、一站式服務(wù)，年訪問量超過400萬次，累計(jì)訪問量超過2500萬次。大數(shù)據(jù)系列MOOC課程入選“2023年教育部國家智慧教育公共服務(wù)平臺(tái)應(yīng)用典型案例”。附錄B：大數(shù)據(jù)學(xué)習(xí)路線圖大數(shù)據(jù)學(xué)習(xí)路線圖訪問地址:/post/10164/附錄C：林子雨大數(shù)據(jù)系列教材了解全部教材信息:/post/bigdatabook/附錄D：《數(shù)字素養(yǎng)通識(shí)教程》林子雨編著《數(shù)字素養(yǎng)通識(shí)教程——大數(shù)據(jù)與人工智能時(shí)代的計(jì)算機(jī)通識(shí)教育》人民郵電出版社ISBN:978-7-115-65946-02025年1月第1版，定價(jià)：59.8元

教材官網(wǎng)：/post/digital-literacy/15年計(jì)算機(jī)教學(xué)生涯感悟升華，15本計(jì)算機(jī)暢銷教材知識(shí)凝練數(shù)字時(shí)代的大學(xué)計(jì)算機(jī)公共課教材，重構(gòu)大學(xué)計(jì)算機(jī)公共課知識(shí)體系深刻變革傳統(tǒng)大學(xué)計(jì)算機(jī)通識(shí)教育，培養(yǎng)學(xué)生計(jì)算思維、數(shù)據(jù)思維和AI思維附錄E：《大數(shù)據(jù)導(dǎo)論（通識(shí)課版，第2版）》教材高等教育出版社

2024年7月第2版ISBN：978-7-04-062466-3定價(jià)：39.50元

教材官方網(wǎng)站:/post/bigdataintroduction2/0503020104引導(dǎo)學(xué)生步入大數(shù)據(jù)時(shí)代，積極投身大數(shù)據(jù)的變革浪潮之中了解大數(shù)據(jù)概念，培養(yǎng)大數(shù)據(jù)思維，養(yǎng)成數(shù)據(jù)安全意識(shí)認(rèn)識(shí)大數(shù)據(jù)倫理，努力使自己的行為符合大數(shù)據(jù)倫理規(guī)范要求熟悉大數(shù)據(jù)應(yīng)用，探尋大數(shù)據(jù)與自己專業(yè)的應(yīng)用結(jié)合點(diǎn)激發(fā)學(xué)生基于大數(shù)據(jù)的創(chuàng)新創(chuàng)業(yè)熱情開設(shè)全校公共選修課的優(yōu)質(zhì)教材，本課程旨在實(shí)現(xiàn)以下幾個(gè)培養(yǎng)目標(biāo)：附錄F：《大數(shù)據(jù)與人工智能導(dǎo)論（通識(shí)課版）》《大數(shù)據(jù)與人工智能導(dǎo)論（通識(shí)課版）》版次：2025年1月第1版林子雨

編著，人民郵電出版社

ISBN:978-7-115-65696-4定價(jià)：59.8元

教材官網(wǎng)：/post/bigdata-ai-introduction/本書詳細(xì)闡述了培養(yǎng)具有數(shù)字素養(yǎng)的綜合型人才所需要的相關(guān)知識(shí)儲(chǔ)備。作為通識(shí)類課程教材，本書在確定知識(shí)布局時(shí)，緊緊圍繞通識(shí)教育核心理念，系統(tǒng)介紹大數(shù)據(jù)、云計(jì)算、物聯(lián)網(wǎng)、人工智能、區(qū)塊鏈、元宇宙等技術(shù)的相關(guān)知識(shí)，努力培養(yǎng)學(xué)生的數(shù)字素養(yǎng)。全書共9章，內(nèi)容包括大數(shù)據(jù)概述、大數(shù)據(jù)技術(shù)、大數(shù)據(jù)應(yīng)用、大數(shù)據(jù)基礎(chǔ)知識(shí)、人工智能、大模型：人工智能的前沿、AIGC應(yīng)用與實(shí)踐、新興數(shù)字技術(shù)、新興數(shù)字技術(shù)的倫理問題。為了避免陷入空洞的理論介紹，本書在很多章節(jié)都融入了豐富的案例，這些案例就發(fā)生在我們生活的數(shù)字時(shí)代，很具有代表性和說服力，能夠讓學(xué)生直觀感受相應(yīng)理論的具體內(nèi)涵。附錄G：《大數(shù)據(jù)導(dǎo)論（第2版）》教材林子雨編著《大數(shù)據(jù)導(dǎo)論（第2版）》人民郵電出版社

ISBN：978-7-115-64185-4定價(jià)：59.80元2024年7月教材官方網(wǎng)站:/post/bigdata-introduction2/開設(shè)大數(shù)據(jù)專業(yè)導(dǎo)論課的優(yōu)質(zhì)教材，本書詳細(xì)闡述了培養(yǎng)復(fù)合型大數(shù)據(jù)專業(yè)人才所需要的大數(shù)據(jù)相關(guān)知識(shí)。全書共10章，內(nèi)容包括：大數(shù)據(jù)概述大數(shù)據(jù)與其他新興技術(shù)的關(guān)系大數(shù)據(jù)基礎(chǔ)知識(shí)大數(shù)據(jù)應(yīng)用大數(shù)據(jù)硬件環(huán)境數(shù)據(jù)采集與預(yù)處理數(shù)據(jù)存儲(chǔ)與管理數(shù)據(jù)處理與分析數(shù)據(jù)可視化大數(shù)據(jù)分析綜合案例在大數(shù)據(jù)基礎(chǔ)知識(shí)部分，本書詳細(xì)介紹了與培養(yǎng)學(xué)生的數(shù)據(jù)素養(yǎng)相關(guān)的知識(shí)，包括大數(shù)據(jù)安全、大數(shù)據(jù)思維、大數(shù)據(jù)倫理、數(shù)據(jù)共享、數(shù)據(jù)開放和大數(shù)據(jù)交易。附錄H：《大數(shù)據(jù)技術(shù)原理與應(yīng)用（第4版）》教材《大數(shù)據(jù)技術(shù)原理與應(yīng)用——概念、存儲(chǔ)、處理、分析與應(yīng)用（第4版）》林子雨編著，人民郵電出版社

ISBN:978-7-115-64181-6定價(jià)：65元2024年8月教材官方網(wǎng)站:/post/bigdata4國內(nèi)高校第一本系統(tǒng)介紹大數(shù)據(jù)知識(shí)的專業(yè)教材，本書系統(tǒng)介紹大數(shù)據(jù)的相關(guān)知識(shí)，分為大數(shù)據(jù)基礎(chǔ)篇、大數(shù)據(jù)存儲(chǔ)與管理篇、大數(shù)據(jù)處理與分析篇、大數(shù)據(jù)應(yīng)用篇。全書共14章，內(nèi)容包含：本書在Hadoop、HDFS、HBase、MapReduce、Hive、Spark和Flink等相關(guān)章安排了入門級(jí)的實(shí)驗(yàn)，以便讀者能更好地學(xué)習(xí)和掌握大數(shù)據(jù)的關(guān)鍵技術(shù)。大數(shù)據(jù)概述大數(shù)據(jù)處理架構(gòu)Hadoop分布式文件系統(tǒng)HDFS分布式數(shù)據(jù)庫HBaseNoSQL數(shù)據(jù)庫云數(shù)據(jù)庫MapReduceHadoop再探討數(shù)據(jù)倉庫HiveSpark流計(jì)算Flink圖計(jì)算大數(shù)據(jù)應(yīng)用附錄I：《大數(shù)據(jù)基礎(chǔ)編程、實(shí)驗(yàn)和案例教程（第3版）》與《大數(shù)據(jù)技術(shù)原理與應(yīng)用（第4版）》教材配套的唯一指定實(shí)驗(yàn)指導(dǎo)書林子雨編著，清華大學(xué)出版社

ISBN:978-7-302-66922-7

定價(jià)：69元

2024年8月第3版《大數(shù)據(jù)基礎(chǔ)編程、實(shí)驗(yàn)和案例教程（第3版）》深入淺出，去粗取精，豐富的代碼實(shí)例幫助快速掌握大數(shù)據(jù)基礎(chǔ)編程方法步步引導(dǎo)，循序漸進(jìn)，詳盡的安裝指南為順利搭建大數(shù)據(jù)實(shí)驗(yàn)環(huán)境鋪平道路0102精心設(shè)計(jì)，巧妙融合，八套大數(shù)據(jù)實(shí)驗(yàn)題目促進(jìn)理論與編程知識(shí)的消化和吸收03結(jié)合理論，聯(lián)系實(shí)際，大數(shù)據(jù)課程綜合實(shí)驗(yàn)案例精彩呈現(xiàn)大數(shù)據(jù)分析全流程04附錄J：《數(shù)據(jù)采集與預(yù)處理（第2版）》詳細(xì)闡述了大數(shù)據(jù)領(lǐng)域數(shù)據(jù)采集與預(yù)處理的相關(guān)理論和技術(shù)林子雨編著，人民郵電出版社2025年1月

978-7-115-65728-2

定價(jià)：69.80元教材官網(wǎng)：/post/data-collection2/全書共8章，內(nèi)容包括：概述大數(shù)據(jù)實(shí)驗(yàn)環(huán)境搭建網(wǎng)絡(luò)數(shù)據(jù)采集分布式消息系統(tǒng)Kafka日志采集系統(tǒng)Flume數(shù)據(jù)倉庫中的數(shù)據(jù)集成ETL工具Kettle使用pandas進(jìn)行數(shù)據(jù)清洗本書在網(wǎng)絡(luò)數(shù)據(jù)采集、Kafka、Flume、Kettle、pandas等重要章節(jié)安排了豐富的實(shí)踐操作，以便讀者更好地學(xué)習(xí)和掌握數(shù)據(jù)采集與預(yù)處理的關(guān)鍵技術(shù)。附錄K：《Python程序設(shè)計(jì)基礎(chǔ)教程（微課版）》教材：林子雨，趙江聲，陶繼平.《Python程序設(shè)計(jì)基礎(chǔ)教程（微課版）》人民郵電出版社,2022年2月.教材官網(wǎng)（獲取講義PPT、代碼等）：

/post/python/

實(shí)驗(yàn)手冊：林子雨，鄭海山.《Python程序設(shè)計(jì)實(shí)驗(yàn)指導(dǎo)與習(xí)題解答》.人民郵電出版社，2022年4月.實(shí)驗(yàn)手冊官網(wǎng)（獲取代碼等）：/post/python-experiment/附錄L：《Spark編程基礎(chǔ)（Scala版，第2版）》《Spark編程基礎(chǔ)（Scala版，第2版）》林子雨，賴永炫，陶繼平

編著，人民郵電出版社

ISBN:978-7-115-59501-0

教材官網(wǎng)：/post/spark2/本書以Scala作為開發(fā)Spark應(yīng)用程序的編程語言，系統(tǒng)介紹了Spark編程的基礎(chǔ)知識(shí)。全書共9章，內(nèi)容包括：大數(shù)據(jù)技術(shù)概述Scala語言基礎(chǔ)Spark的設(shè)計(jì)與運(yùn)行原理Spark環(huán)境搭建和使用方法RDD編程SparkSQLSparkStreamingSparkMLlib本書每個(gè)章節(jié)都安排了入門級(jí)的編程實(shí)踐操作，以便讀者更好地學(xué)習(xí)和掌握Spark編程方法。本書官網(wǎng)免費(fèi)提供了全套的在線教學(xué)資源，包括講義PPT、習(xí)題、源代碼、軟件、數(shù)據(jù)集、授課視頻、上機(jī)實(shí)驗(yàn)指南等。披荊斬棘在大數(shù)據(jù)叢林中開辟學(xué)習(xí)捷徑填溝削坎為快速學(xué)習(xí)Spark技術(shù)鋪平道路深入淺出有效降低Spark技術(shù)學(xué)習(xí)門檻資源全面構(gòu)建全方位一站式在線服務(wù)體系附錄M：《Spark編程基礎(chǔ)（Python版，第2版）》《Spark編程基礎(chǔ)》（Python版，第2版）林子雨，鄭海山，賴永炫

編著，人民郵電出版社

ISBN:978-7-115-64403-9

出版發(fā)行，教材官網(wǎng)：/post/spark-python2/本書以Python作為開發(fā)Spark應(yīng)用程序的編程語言，系統(tǒng)介紹了Spark編程