未來數(shù)據(jù)趨勢：實時分析和混合模型

　　Starburst 聯(lián)合創(chuàng)始人兼首席執(zhí)行官 Justin Borgman 概述了他預計的 2025 年數(shù)據(jù)、人工智能和存儲領域的主要趨勢。

　　Borgman 強調(diào)，企業(yè)越來越重視實時分析。“企業(yè)將優(yōu)先考慮實時分析，在幾分鐘內(nèi)提供洞察，以跟上日益激烈的客戶和市場需求與競爭。這種轉(zhuǎn)變將使從營銷到客戶服務的各部門能夠更快地做出決策，從而為組織帶來競爭優(yōu)勢。實時數(shù)據(jù)對于希望立即采取行動的公司來說將變得至關(guān)重要，將分析從一種臨時的、回顧性的工具轉(zhuǎn)變?yōu)橐环N主動的業(yè)務驅(qū)動因素，”他解釋道。

　　Borgman 發(fā)現(xiàn)的另一個趨勢是，通過定義明確的數(shù)據(jù)產(chǎn)品加速和擴展人工智能。 “定義明確的數(shù)據(jù)產(chǎn)品成為擴展 RAG 等 AI 工作流的先決條件。我們都知道，您的 AI 的好壞取決于您輸入的數(shù)據(jù)，質(zhì)量和治理的重要性將變得比以往任何時候都更加重要。此外，數(shù)據(jù)產(chǎn)品包括業(yè)務環(huán)境，這對您的 AI 應用程序至關(guān)重要，”Borgman 表示。

　　在討論數(shù)據(jù)存儲趨勢時，Borgman 指出了混合 Lakehouse 模型的興起?！氨镜財?shù)據(jù)架構(gòu)的復興將使 Lakehouse 擴展到混合環(huán)境，無縫融合云和本地數(shù)據(jù)存儲?；旌?Lakehouse 模型提供了云存儲的可擴展性和對本地的安全控制，在統(tǒng)一、可訪問的框架內(nèi)提供靈活性和可擴展性，”Borgman 評論道。

　　Borgman 還指出，SQL 在數(shù)據(jù)湖中重新流行起來，這得益于 Apache Iceberg 等簡化數(shù)據(jù)訪問的表格格式?！坝捎?Apache Iceberg 等表格格式簡化了數(shù)據(jù)訪問，SQL 在數(shù)據(jù)湖中卷土重來，使 SQL 引擎能夠超越 Spark。SQL 的重新流行使整個組織的數(shù)據(jù)民主化，促進了數(shù)據(jù)驅(qū)動的決策，并擴大了團隊的數(shù)據(jù)素養(yǎng)。SQL 的可訪問性將使數(shù)據(jù)洞察廣泛可用，支持數(shù)據(jù)賦能，”他評論道。

　　此外，Borgman 建議改變現(xiàn)代數(shù)據(jù)驅(qū)動的 SaaS 應用程序的開發(fā)方式，更傾向于使用數(shù)據(jù)湖而不是傳統(tǒng)數(shù)據(jù)庫或數(shù)據(jù)倉庫。

　　“新的數(shù)據(jù)應用程序?qū)⒔⒃跀?shù)據(jù)湖上，而不是傳統(tǒng)的數(shù)據(jù)庫或數(shù)據(jù)倉庫上，”他說

　　“原因很簡單：SaaS 公司非常關(guān)心他們所提供產(chǎn)品的毛利率，而數(shù)據(jù)湖的 TCO 明顯更低，并且沒有供應商鎖定。在對象存儲湖上構(gòu)建應用程序允許公司利用 Iceberg 等開放格式進行存儲，利用 Trino 等開放引擎進行計算。最終結(jié)果是應用程序堆棧不會花費太多，而且經(jīng)過驗證可以處理互聯(lián)網(wǎng)規(guī)模，”Borgman 詳細闡述道。

　　來源：千家網(wǎng)