阿里云新技術PilotScope登上頂會VLDB，AI算法“一鍵部署”進數(shù)據(jù)庫

12月20日，數(shù)據(jù)庫國際頂會VLDB2024公布新一批論文，阿里云新技術PilotScope成功入圍，該平臺技術可實現(xiàn)AI算法在數(shù)據(jù)庫的“一鍵部署”，極大降低數(shù)據(jù)庫中AI算法的應用門檻，為數(shù)據(jù)庫智能化開辟了全新空間。同日阿里云宣布將PilotScope全部技術免費開源。

圖說：數(shù)據(jù)庫頂會VLDB2024

數(shù)據(jù)庫是事關國計民生的基礎軟件技術，數(shù)據(jù)庫技術的更新影響著數(shù)字時代的千行百業(yè)，其中一個前沿領域即是數(shù)據(jù)庫智能化（AI4DB，AI for Database）。現(xiàn)在的數(shù)據(jù)庫系統(tǒng)非常復雜，對穩(wěn)定性要求極高，即便將單一AI算法與單一數(shù)據(jù)庫作匹配調(diào)試，也需要雙方工程師緊密配合數(shù)周甚至數(shù)月，效率低、效果差，導致業(yè)界遲遲無法將日新月異的AI算法應用到數(shù)據(jù)庫中。

圖說：阿里云PilotScope架構圖

針對這一難題，阿里云提出了新解法：通過在數(shù)據(jù)庫和AI系統(tǒng)級抽象和通用化模塊及接口定義，研發(fā)出一個全新的中間件系統(tǒng)平臺PilotScope，讓AI算法在數(shù)小時乃至數(shù)分鐘內(nèi)在數(shù)據(jù)庫內(nèi)實現(xiàn)“一鍵部署”。VLDB評議認為，PilotScope基于應用場景開創(chuàng)性的系統(tǒng)設計，將開啟數(shù)據(jù)庫智能化的全新方向。

據(jù)了解，PilotScope針對參數(shù)調(diào)優(yōu)、索引推薦、基數(shù)估計、查詢優(yōu)化等數(shù)據(jù)庫主流任務，預置了10多種AI算法，并完成PostgreSQL和Spark等兩大主流開源數(shù)據(jù)庫的適配打樣。實驗數(shù)據(jù)顯示，使用PilotScope將AI算法嵌入數(shù)據(jù)庫，較傳統(tǒng)“硬植入”方法，查詢優(yōu)化等任務提速1到2倍不等，且PilotScope本身對部署產(chǎn)生的額外代價基本可忽略，表現(xiàn)突出。

圖說：PilotScope效果圖

“PilotScope就像個數(shù)據(jù)庫AI‘超級管理員’，通過這一平臺，AI工程師只需專注于設計通用算法，可實現(xiàn)對不同數(shù)據(jù)庫的部署和應用；而數(shù)據(jù)庫使用者可像調(diào)用API那樣，方便又高效地用上AI?！痹擁椖控撠熑酥戽g介紹說，PilotScope對數(shù)據(jù)庫“零侵入”，并設計了智能檢測、回退、隔離等機制，降低AI幻覺風險，在確保數(shù)據(jù)庫穩(wěn)定性的前提下實現(xiàn)智能化提升。

目前，PilotScope已在阿里云內(nèi)部展開試點應用，相關技術也通過GitHub及Modelscope魔搭社區(qū)對外免費開源。

據(jù)了解，VLDB是數(shù)據(jù)庫三大國際頂級會議之一，每年僅收錄在學術界和產(chǎn)業(yè)實踐中產(chǎn)生重要影響的新成果，是權威的數(shù)據(jù)庫技術風向標。第50屆VLD B大會預計于2024年8月在中國廣州舉辦。

——————                                     

附開源地址：

https://github.com/alibaba/pilotscope

雷峰網(wǎng)(公眾號：雷峰網(wǎng))