AI時(shí)代數(shù)據(jù)庫管理管控平臺(tái)北京新數(shù)科技有限公司陳永杰｜解決方案架構(gòu)師的進(jìn)階路徑北京新數(shù)科技有限公司陳永杰｜解決方案架構(gòu)師01國內(nèi)數(shù)據(jù)庫發(fā)展歷程：四大發(fā)展階段去IOE時(shí)期去IOE時(shí)期用mysql/pg等開源數(shù)據(jù)庫替代商業(yè)庫,國外商業(yè)數(shù)據(jù)庫02以DB2、Oracle為代表的集中式數(shù)010303分布式數(shù)據(jù)庫興起04開始大規(guī)模替換傳統(tǒng)的集中式數(shù)據(jù)庫分布式數(shù)據(jù)庫興起04開始大規(guī)模替換傳統(tǒng)的集中式數(shù)據(jù)庫達(dá)夢(mèng)、OB、Gauss、GoldenDB、TiDB在不同的領(lǐng)域形成了一定的優(yōu)勢(shì)02新數(shù)歷程：歷經(jīng)三個(gè)階段，已成為數(shù)據(jù)庫生態(tài)領(lǐng)域領(lǐng)頭羊3.0業(yè)內(nèi)最全布局體系1.0行業(yè)初探原廠工具+運(yùn)維服務(wù)?數(shù)據(jù)復(fù)制量管理體系?公司??數(shù)據(jù)復(fù)制量管理體系?公司?軟件啟動(dòng)認(rèn)證通過?成立件發(fā)布研發(fā)2.0市場(chǎng)資本認(rèn)可上云奠定產(chǎn)品化基礎(chǔ)ShinSightShinSight數(shù)據(jù)庫管理平臺(tái)品系列落地：數(shù)dbPaaS產(chǎn)品在業(yè)內(nèi)據(jù)庫云管理平臺(tái)、?獲得由曦域資本領(lǐng)投的數(shù)千萬元A輪融資率先研發(fā)推出獲天創(chuàng)資本數(shù)千萬元的pre-A輪融資數(shù)據(jù)傳輸平臺(tái)和數(shù)據(jù)庫管理系統(tǒng)?核心產(chǎn)品云管?平臺(tái)ShinDataDMP與諸多國?產(chǎn)軟硬件完成兼容互認(rèn)?專業(yè)云平臺(tái)，云原生智能化信創(chuàng)催動(dòng)爆發(fā)期到來AIOps進(jìn)一步?9.0發(fā)布，云管平臺(tái)進(jìn)一步完善ShinDB數(shù)據(jù)庫容?器云平臺(tái)V2.0發(fā)布，云原生能力提升完成由復(fù)星銳正領(lǐng)投A+輪融資dbPaaS數(shù)據(jù)庫云平臺(tái)體系產(chǎn)品發(fā)布，形成完整數(shù)據(jù)庫云體系產(chǎn)品完成渤海創(chuàng)富和彬復(fù)資本投資的B輪融資?IDC數(shù)據(jù)庫云運(yùn)維管理市場(chǎng)份額第一和DMP平臺(tái)等產(chǎn)品重構(gòu)，建造數(shù)據(jù)庫開發(fā)和安全一體化平臺(tái)落地，產(chǎn)品全面智能化推進(jìn)?基于LLM的智能問答、診斷和ShinBot智能體03地位：數(shù)據(jù)庫云運(yùn)維管理平臺(tái)市場(chǎng)份額第一，斬獲殊榮新數(shù)科技在數(shù)據(jù)庫云運(yùn)維管理平臺(tái)市場(chǎng)份額第一，市場(chǎng)增量第一數(shù)據(jù)來源：IDC《中國數(shù)據(jù)庫云市場(chǎng)份額，2024》國家高新技術(shù)企業(yè)北京市“專精特新”企業(yè)中關(guān)村高新技術(shù)企業(yè)中關(guān)村瞪羚企業(yè)國家高新技術(shù)企業(yè)北京市“專精特新”企業(yè)中關(guān)村高新技術(shù)企業(yè)中關(guān)村瞪羚企業(yè)北京市“雙軟”認(rèn)定企業(yè)北京市新技術(shù)新產(chǎn)品（服務(wù)）認(rèn)定大數(shù)據(jù)技術(shù)標(biāo)準(zhǔn)推進(jìn)委員會(huì)成員單位朝陽區(qū)鳳鳴企業(yè)北京朝陽明日之星朝陽區(qū)未來獨(dú)角獸企業(yè)北京軟件核心競(jìng)爭(zhēng)力企業(yè)（創(chuàng)新型）信息技術(shù)應(yīng)用創(chuàng)新工作委員會(huì)會(huì)員單位中國信通院數(shù)據(jù)庫應(yīng)用創(chuàng)新實(shí)驗(yàn)室成員北京信息化協(xié)會(huì)信息技術(shù)應(yīng)用創(chuàng)新工作委員會(huì)會(huì)員單位SAP授權(quán)合作伙伴Oracle認(rèn)證合作伙伴IBM銀級(jí)合作伙伴ISO9001質(zhì)量管理體系認(rèn)證北京軟件和信息服務(wù)業(yè)協(xié)會(huì)成員中國信通院開源供應(yīng)商名單黑馬數(shù)據(jù)經(jīng)濟(jì)產(chǎn)業(yè)TOP100招商銀行十大優(yōu)秀供應(yīng)商稱號(hào)中國信通院“可信數(shù)據(jù)庫”評(píng)測(cè)入選《數(shù)據(jù)智能平臺(tái)廠商全景報(bào)告》年度信創(chuàng)推薦廠商中國企服行業(yè)最具成長(zhǎng)力TOP50分布式數(shù)據(jù)庫金融創(chuàng)新企業(yè)榜單年度技術(shù)卓越獎(jiǎng)CBInsights“數(shù)據(jù)鏈路安全領(lǐng)航者”榜單軟件和信息技術(shù)服務(wù)成長(zhǎng)型企業(yè)04新數(shù)DMP：國內(nèi)首款一站式數(shù)據(jù)庫全生命周期管理dbPaaS平臺(tái)模塊可基于底座靈活增減快速部署模塊可基于底座靈活增減快速部署審核安全管控遷移平臺(tái)自研通用化底座，海量節(jié)點(diǎn)支持，多引擎實(shí)現(xiàn)所有功能服務(wù)管理服務(wù)管理用戶管理容器管理基礎(chǔ)運(yùn)維災(zāi)備切換備份恢復(fù)安裝部署報(bào)表管理資源配置智能巡檢監(jiān)控告警性能容量》API調(diào)用!f數(shù)據(jù)傳輸API調(diào)用數(shù)據(jù)傳輸》監(jiān)控?cái)?shù)據(jù)傳輸API調(diào)用API調(diào)用監(jiān)控?cái)?shù)據(jù)傳輸API調(diào)用!f監(jiān)控?cái)?shù)據(jù)傳輸監(jiān)控?cái)?shù)據(jù)傳輸API調(diào)用API調(diào)用監(jiān)控?cái)?shù)據(jù)傳輸API調(diào)用監(jiān)控?cái)?shù)據(jù)傳輸API調(diào)用05新數(shù)DMP：功能模塊全、信創(chuàng)數(shù)據(jù)庫覆蓋廣，助力dbPaaS建設(shè)dbpaas建設(shè)dbpaas建設(shè)快速構(gòu)建dbPaaS平臺(tái)，幫助企業(yè)和組織實(shí)現(xiàn)數(shù)據(jù)庫自服務(wù)能力，配合私有云建設(shè)全面適配信創(chuàng)支持操作系統(tǒng)、CPU全面適配信創(chuàng)支持操作系統(tǒng)、CPU、中間件等全棧信創(chuàng)化架構(gòu)，全面兼容對(duì)接自動(dòng)化運(yùn)維輔助將日常巡檢、標(biāo)準(zhǔn)變更等自動(dòng)化運(yùn)維輔助將日常巡檢、標(biāo)準(zhǔn)變更等重復(fù)運(yùn)維工作內(nèi)置為自動(dòng)化、一鍵式功能，輕松完成并提高運(yùn)維效率性能容量管理高效進(jìn)行容量管理，性能容量管理高效進(jìn)行容量管理，維護(hù)數(shù)據(jù)庫性能，保障數(shù)據(jù)可靠性、優(yōu)化資源利用以及降低運(yùn)維成本監(jiān)控告警巡檢監(jiān)控告警巡檢多層次—體化性能監(jiān)控、故障定位和告警功能，全面掌握系統(tǒng)負(fù)荷和運(yùn)行狀態(tài)，降低運(yùn)維成本數(shù)據(jù)庫統(tǒng)一管理統(tǒng)一的平臺(tái)入口，從離數(shù)據(jù)庫統(tǒng)一管理統(tǒng)一的平臺(tái)入口，從離散走向集約，資源統(tǒng)一調(diào)度管控和按需分配數(shù)據(jù)庫智能化云平臺(tái)數(shù)據(jù)庫智能化云平臺(tái)06新數(shù)DSC：數(shù)據(jù)庫全流程SQL執(zhí)行變更和安全防護(hù)平臺(tái)基于權(quán)限管理和高性能操作的數(shù)據(jù)庫開發(fā)和安全一體化平臺(tái)，集高危攔截與人工審批功能、敏感數(shù)據(jù)動(dòng)態(tài)脫敏、水印及下載權(quán)提權(quán)執(zhí)行操作風(fēng)險(xiǎn)告警提權(quán)執(zhí)行安全審計(jì)工單管理多重身份認(rèn)證細(xì)粒度權(quán)限管控安全審計(jì)工單管理多重身份認(rèn)證高危操作攔截變更自動(dòng)備份高危操作攔截系統(tǒng)管理操作風(fēng)險(xiǎn)配置行為追溯操作二次確認(rèn)系統(tǒng)管理操作風(fēng)險(xiǎn)配置行為追溯權(quán)限管控?cái)?shù)據(jù)變更回滾權(quán)限管控SQL審核發(fā)布審計(jì)分析SQLSQL審核發(fā)布審計(jì)分析動(dòng)態(tài)脫敏自定義水印動(dòng)態(tài)脫敏執(zhí)行通知任務(wù)管理執(zhí)行通知定位和分析SQL定位和分析SQLSQL語句審核本審核慢日志審核、數(shù)據(jù)庫變更審批08客戶群體：客戶廣泛優(yōu)質(zhì)，覆蓋各行業(yè)頭部企業(yè)金融食品零售能源制造egEegE""T""T公共事業(yè)09案例實(shí)踐：某股份制大型銀行，首例大型dbPaas平臺(tái)落地實(shí)踐第一階段第二階段第三階段第四階段第一階段第二階段第三階段第四階段建成數(shù)據(jù)庫統(tǒng)一管理平臺(tái)項(xiàng)數(shù)據(jù)庫容器云和數(shù)據(jù)庫遷移升ITTL創(chuàng)建變更申請(qǐng)ITTL創(chuàng)建變更申請(qǐng)實(shí)施人實(shí)施人ITTL正常流程ITTL正常流程是一納管，生產(chǎn)環(huán)境納管數(shù)百套套數(shù)據(jù)庫(是），個(gè)人一個(gè)人一一審批是否通過變更復(fù)核否否高危具體風(fēng)審批是否通過變更復(fù)核否否高危具體風(fēng)變更分發(fā)審批是否變更分發(fā)審批是否一算法，支持模型訓(xùn)練和推理模型管理：提供模型的存儲(chǔ)、管理和版本控制算子：將一運(yùn)維智能設(shè)計(jì)/01新數(shù)產(chǎn)品矩陣：以云管、開發(fā)平臺(tái)為拳頭產(chǎn)品，覆蓋全生命周期優(yōu)勢(shì)優(yōu)勢(shì)02新數(shù)AIOps：基于人工智能的新一代運(yùn)維管理和優(yōu)化模式SQL優(yōu)化以及ShinBot智能體等能力，構(gòu)成一個(gè)智能協(xié)同的數(shù)據(jù)庫AIOps生態(tài)系統(tǒng)，解決面臨大量數(shù)據(jù)庫實(shí)例時(shí)所遇到的性能瓶頸、開發(fā)管控難度大等復(fù)雜問題AgentAgent數(shù)據(jù)庫問答知識(shí)庫增強(qiáng)問答Text2SQL，用自然語言詢問，根據(jù)庫表結(jié)構(gòu)自動(dòng)構(gòu)建SQL查詢根據(jù)內(nèi)部文檔、數(shù)據(jù)庫問答知識(shí)庫增強(qiáng)問答Text2SQL，用自然語言詢問，根據(jù)庫表結(jié)構(gòu)自動(dòng)構(gòu)建SQL查詢根據(jù)內(nèi)部文檔、API文檔、代碼注釋等資料構(gòu)建專屬數(shù)據(jù)庫，提供詳細(xì)的開發(fā)指導(dǎo)和支持基于Agent技術(shù)，通過調(diào)用產(chǎn)品API，提供個(gè)性化交互與自動(dòng)任務(wù)處理利用大語言模型技術(shù)來分析、理解和優(yōu)化SQL查詢，提升SQL語句的質(zhì)量理解用戶以自然語言提出的問題，通過檢索相關(guān)信息生成準(zhǔn)確、簡(jiǎn)潔的答案Agent的功能與特性理解并解析來自用戶的查詢（Query），整合當(dāng)前的上下文信息），靈活運(yùn)用各種API或工具（Tools），包括數(shù)據(jù)庫監(jiān)控系統(tǒng)、備份解決方以滿足用戶的具體需求擁有長(zhǎng)期記憶和短期記憶，以便記住過去的經(jīng)驗(yàn)教訓(xùn)，同時(shí)也能快速適應(yīng)新情況根據(jù)從工具獲取的信息做出決策，決定下一步的動(dòng)作（Action）01新數(shù)Agent的功能與特性理解并解析來自用戶的查詢（Query），整合當(dāng)前的上下文信息），靈活運(yùn)用各種API或工具（Tools），包括數(shù)據(jù)庫監(jiān)控系統(tǒng)、備份解決方以滿足用戶的具體需求擁有長(zhǎng)期記憶和短期記憶，以便記住過去的經(jīng)驗(yàn)教訓(xùn)，同時(shí)也能快速適應(yīng)新情況根據(jù)從工具獲取的信息做出決策，決定下一步的動(dòng)作（Action）定期檢查數(shù)據(jù)庫的各項(xiàng)性能指標(biāo)、日志文件以及備份狀態(tài)，確保數(shù)據(jù)庫處于最佳運(yùn)行狀態(tài)。通過實(shí)時(shí)監(jiān)控和預(yù)警機(jī)制，提前發(fā)現(xiàn)潛在問題并及時(shí)處理故障管理Agent實(shí)時(shí)監(jiān)測(cè)數(shù)據(jù)庫異常情況，不限于查詢超時(shí)、數(shù)據(jù)不一致等問題，并能快速定位故障原因容量管理Agent性能優(yōu)化Agent分析當(dāng)前數(shù)據(jù)庫實(shí)例的存儲(chǔ)使用情況、I/O長(zhǎng)趨勢(shì)，并提供擴(kuò)展建議監(jiān)控SQL查詢的執(zhí)行計(jì)劃和性能表現(xiàn)，識(shí)別低效查詢，并基于規(guī)則或機(jī)器學(xué)習(xí)模型提出優(yōu)化建議，幫助給出索引建議，提升數(shù)據(jù)庫的整體性能知識(shí)管理Agent從網(wǎng)絡(luò)、技術(shù)文檔、向量庫等多種來源中提取和整理關(guān)于數(shù)據(jù)庫的最佳實(shí)踐、常見問題解決方案等信息。交互方式從傳統(tǒng)的Web頁面交互方式轉(zhuǎn)交互方式從傳統(tǒng)的Web頁面交互方式轉(zhuǎn)變?yōu)閷?duì)話式交互，降低了用戶與系統(tǒng)之間的使用復(fù)雜度通過Agent的規(guī)劃能力，自動(dòng)通過Agent的規(guī)劃能力，自動(dòng)執(zhí)行分析和執(zhí)行任務(wù)，減少手動(dòng)操作的需求，提高運(yùn)維效率API整合利用API等工具實(shí)現(xiàn)自動(dòng)化調(diào)用，提升整體運(yùn)維系統(tǒng)的靈活性和智能化水平知識(shí)拓展利用公域和私域的知識(shí)庫，拓展LLM的知識(shí)邊界，提供更精準(zhǔn)的解決方案02新數(shù)AIOps：巡檢Agent4.提交規(guī)劃：4.提交規(guī)劃：6.工具調(diào)用：6.工具調(diào)用：），8.返回回答：8.返回回答： QueryMemory短期記憶：數(shù)據(jù)庫類型 QueryMemory短期記憶：數(shù)據(jù)庫類型和IDPlanning該數(shù)據(jù)庫巡檢巡檢項(xiàng)目包含……用戶請(qǐng)求：用戶請(qǐng)求：數(shù)據(jù)庫進(jìn)行一次巡檢長(zhǎng)期記憶：數(shù)據(jù)庫巡檢包含項(xiàng)目①①③④⑤⑥⑧/Action生成回答，返回給用戶⑦ToolsAPI匹配、參數(shù)組裝、執(zhí)行 ⑤⑥⑧/Action生成回答，返回給用戶⑦ToolsAPI匹配、參數(shù)組裝、執(zhí)行/APIList1.獲取數(shù)據(jù)庫參數(shù)列表、參