openGauss向量驅(qū)動新智能,RAC多寫破局,內(nèi)核升級再啟航

近日,openGauss Developer Day 在北京香格里拉飯店順利舉辦,大會邀請到了產(chǎn)、學(xué)、研、用的眾多行業(yè)專家,以及行業(yè)開發(fā)者參與。大會通過主題發(fā)言、SIG Gathering 等方式,共同探討了數(shù)據(jù)庫技術(shù)的當(dāng)下發(fā)展及未來趨勢,充分展現(xiàn)了 openGauss7.0.0 創(chuàng)新版的技術(shù)特性。主論壇上,openGauss 技術(shù)委員會委員、2012 實(shí)驗(yàn)室高斯部首席架構(gòu)師王磊,openGauss 技術(shù)委員會委員闕鳴健,openGauss 社區(qū) Maintainer 曹宇做了題為《向量驅(qū)動新智能,RAC 多寫破局,內(nèi)核升級再啟航》的主題發(fā)言,全面展示了 openGauss7.0.0 創(chuàng)新版的技術(shù)特性、openGauss 在內(nèi)核、AI 和四高(高性能、高可用、高智能、高安全)能力上的最新技術(shù)成果,以及下一個(gè)版本的技術(shù)演進(jìn)方向。

openGauss向量驅(qū)動新智能,RAC多寫破局,內(nèi)核升級再啟航

主論壇上,openGauss 技術(shù)委員會委員、2012 實(shí)驗(yàn)室高斯部首席架構(gòu)師王磊,詳細(xì)講解了混合交易的應(yīng)用訴求,介紹了 AI 技術(shù)發(fā)展正在加速驅(qū)動數(shù)據(jù)庫演進(jìn)的新趨勢,講解了 openGauss 7.0.0 創(chuàng)新版在高性能方面的技術(shù)優(yōu)勢,介紹了 HTAP 架構(gòu)一體化升級的技術(shù)進(jìn)展,以及鯤鵬多核擴(kuò)展能力持續(xù)增強(qiáng)的新特性。

大會上,闕鳴健介紹了 openGauss DataVec 與業(yè)界主流開源向量數(shù)據(jù)庫的性能對比數(shù)據(jù),充分論證了 openGauss 向量檢索性能領(lǐng)先 30%。

2012實(shí)驗(yàn)室研發(fā)專家王天元進(jìn)行了 GaussMaster 智能運(yùn)維相關(guān)的技術(shù)演示,在第一個(gè)慢 SQL 場景中,GaussMaster 實(shí)現(xiàn)了從發(fā)現(xiàn)、診斷到優(yōu)化的全流程慢 SQL 調(diào)優(yōu)能力,顯著提升慢 SQL 性能。

openGauss向量驅(qū)動新智能,RAC多寫破局,內(nèi)核升級再啟航

openGauss 社區(qū)研發(fā)專家王天元現(xiàn)場演示

在第二個(gè) CPU 飆高場景中,GaussMaster 可以在后端實(shí)時(shí)監(jiān)控業(yè)務(wù)數(shù)據(jù)庫狀態(tài),發(fā)現(xiàn)告警,提供一鍵式的故障診斷能力,輸出根因分析報(bào)告,幫助 DBA 快速定位解決問題。

DataVec 向量化能力增強(qiáng),助力 AI 智能應(yīng)用

openGauss DataVec 向量數(shù)據(jù)庫結(jié)合鯤鵬 RAG 一體機(jī)解決方案,通過量化加速、向標(biāo)融合等技術(shù),解決大模型“知識幻覺”問題,提升 LLM 大語言模型在回答問題的實(shí)時(shí)性和準(zhǔn)確性。

openGauss向量驅(qū)動新智能,RAC多寫破局,內(nèi)核升級再啟航

● openGauss 向量檢索,檢索性能領(lǐng)先 30%

● RAG 獨(dú)立部署,量化加速、向標(biāo)融合減少對推理資源占用,高并發(fā)下減少 40%-80%推理時(shí)延影響,提升吐字效率

● 通過指令集對熱點(diǎn)距離計(jì)算函數(shù)進(jìn)行 SIMD 加速,充分利用算力,同時(shí)減少指令數(shù)量,降低訪存次數(shù),速度提升 20%

● 結(jié)合 SQL 語義、全文檢索、知識圖譜、向量檢索提供四庫合一能力,實(shí)現(xiàn)數(shù)據(jù)庫部署歸一、開發(fā)接口歸一、運(yùn)維歸一

● MCP 協(xié)議接入:實(shí)現(xiàn) LLM 標(biāo)準(zhǔn)化接口對接及數(shù)據(jù)庫安全交互,提供數(shù)據(jù)庫運(yùn)維、監(jiān)控、管理等服務(wù)

openGauss向量驅(qū)動新智能,RAC多寫破局,內(nèi)核升級再啟航

openGauss 技術(shù)委員會委員闕鳴健

曹宇對新發(fā)布的 openGauss oGRAC 多寫架構(gòu)進(jìn)行了詳細(xì)解讀,他表示多寫技術(shù)是當(dāng)前數(shù)據(jù)庫行業(yè)的技術(shù)高峰,介紹了 openGauss 要走向多主的原因,未來的多讀多寫架構(gòu)將極大提高業(yè)務(wù)可靠性、性能以及資源利用率。

openGauss向量驅(qū)動新智能,RAC多寫破局,內(nèi)核升級再啟航

openGauss 社區(qū) Maintainer 曹宇

oGRAC 多寫架構(gòu),全面提升性能和可靠性

以 oGEngine 為基礎(chǔ),融合全閃存存儲OceanStor Dorado作為數(shù)據(jù)底座,構(gòu)建了資源池化可插拔的多寫架構(gòu),實(shí)現(xiàn)基于 CBO 的物理優(yōu)化、邏輯優(yōu)化等,支持多讀多寫落地,具備 POC 能力,滿足架構(gòu)演進(jìn)訴求和客戶運(yùn)維管理需求,多寫 TPCC 性能領(lǐng)先 5%。

● 存算分離架構(gòu):基于企業(yè)級全閃存存儲高性能、高可靠能力,實(shí)現(xiàn)可靠性提升至99.9999%,數(shù)據(jù)空間可靈活擴(kuò)展

● oGEngine 增強(qiáng):堆表/索引支持 PCR,減少跨節(jié)點(diǎn)交互,索引空間節(jié)省 20%

● 段頁式優(yōu)化:段頁式管理頁面,擴(kuò)表 0 等待,性能提升超過 10%

● 事務(wù)機(jī)制優(yōu)化:csn 簡化事務(wù)可見性判斷,csn 推進(jìn)去除單一節(jié)點(diǎn)瓶頸,全局事務(wù)表管理事務(wù)狀態(tài),性能提升超過 30%

● 可靠性增強(qiáng):全局日志管理,環(huán)形按需回放,RTO<8s

openGauss向量驅(qū)動新智能,RAC多寫破局,內(nèi)核升級再啟航

內(nèi)核升級,企業(yè)級特性增強(qiáng)

openGauss7.0.0-RC1 創(chuàng)新版全面升級內(nèi)核四高能力,傳統(tǒng)主備部署模式下支持行列轉(zhuǎn)換功能,備機(jī)支持列存查詢,整體性能對比原始行存方式平均提升 5 倍,支持智能慢 SQL 查詢診斷,快速定位慢 SQL 根因,運(yùn)維效率倍數(shù)提升。

●行存壓縮功能增強(qiáng):對行存表的數(shù)據(jù)和索引頁面,openGauss 提供基于通用壓縮算法的透明頁壓縮功能,降低磁盤空間占用的同時(shí)保持 OLTP 場景下的高性能;支持頁式存儲和段頁式存儲兩種模式

●SQL 功能增強(qiáng):支持 CROSS/OUTER APPLY JOIN 語法,用于返回左側(cè)表達(dá)式的每一行和右側(cè)表達(dá)式的匹配行。CUME_DIST、DENSE_RANK、PERCENT_RANK、RANK 函數(shù)支持任意類型的任意多個(gè)入?yún)ⅲ诤瘮?shù)內(nèi)的入?yún)?shù)據(jù)類型和 ORDER BY 的數(shù)據(jù)類型不一致時(shí)也支持執(zhí)行。支持 JSON_EXISTS、 JSON_TEXTCONTAINS 表達(dá)式。支持修改/刪除視圖引用的對象(如表、列、函數(shù)、視圖等)后,將視圖置為無效狀態(tài)

●存儲過程功能增強(qiáng):支持自定義 subtype 語法;支持 EXCEPTION FOR 自定義異常;支持在函數(shù)或者過程中創(chuàng)建過程

●其他增強(qiáng):支持多個(gè)會話并發(fā)插入 interval 分區(qū)時(shí),如果多個(gè)會話都涉及分區(qū)自動擴(kuò)展動作,不會發(fā)生卡死問題。新增用于詞法語法分析的 openGauss SQL 審計(jì)工具 libog_query,支持離線審計(jì)分析 SQL 語句在 openGauss 中的語法合法性。CM/OM/DATAKIT 工具中用到的 SSH SCP 等相關(guān)通信工具支持用戶自定義端口,避免部分環(huán)境無法使用默認(rèn) 22 端口的問題,OM 工具支持記錄升級歷史記錄

openGauss 作為國內(nèi)極具創(chuàng)新力的開源數(shù)據(jù)庫社區(qū),未來將在內(nèi)核能力、DataVec 向量化能力、Datapod 三層資源池化架構(gòu)、DataKit 數(shù)據(jù)全生命周期管理平臺、生態(tài)兼容性等方面持續(xù)進(jìn)行技術(shù)創(chuàng)新。希望攜手各位伙伴、開源與標(biāo)準(zhǔn)化組織、以及廣大開發(fā)者一起,共同推動數(shù)據(jù)庫技術(shù)的高質(zhì)量發(fā)展。

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )