阿里云ODPS十五周年重磅升級發(fā)布:為AI而生的數(shù)據(jù)平臺

來源:網(wǎng)絡(luò) 時間:2025-07-24 09:32:18

阿里云ODPS十五周年重磅升級發(fā)布:為AI而生的數(shù)據(jù)平臺

       7月23日,正值阿里云第一款產(chǎn)品,自研大數(shù)據(jù)平臺 ODPS 十五周年之際,阿里云智能集團(tuán)副總裁、計算平臺負(fù)責(zé)人汪軍華正式宣布 ODPS 全面擁抱 AI,升級 ODPS 架構(gòu),推動大數(shù)據(jù)與 AI 的深度融合。

十五年深耕,從云原生到AI原生的跨越

自2009年誕生以來,ODPS 見證了大數(shù)據(jù)技術(shù)的飛速發(fā)展,從最初的離線計算引擎成長為全球領(lǐng)先的云原生大數(shù)據(jù)平臺。過去十五年,ODPS 不僅支撐了阿里集團(tuán)內(nèi)部電商、金融、物流等核心業(yè)務(wù)的數(shù)據(jù)處理需求,還幫助全球客戶實現(xiàn)了從線下 IDC 到云原生的平滑過渡。今天,ODPS 正式邁入 AI Native 時代,ODPS 將再次進(jìn)化,成為為AI而生的數(shù)據(jù)平臺。

Data+AI 雙引擎:加速企業(yè)智能落地

ODPS 平臺架構(gòu)在面對 AI 浪潮做了全新升級,推出面向 Data+AI 的新一代數(shù)智一體計算平臺,融合 Data 和 AI 雙引擎。

基礎(chǔ)設(shè)施層:整合阿里云計算、網(wǎng)絡(luò)、存儲等核心資源,支撐上層大數(shù)據(jù)和 AI 分布式架構(gòu)的穩(wěn)定運行。

計算服務(wù)層:在計算引擎層提供多種離線/實時/AI 計算資源保障云端數(shù)據(jù)加工與 AI 算力調(diào)度能力之外,Data 和 AI 也進(jìn)行了深層的融合,MaxCompute 融合大模型,圍繞大模型提供超大規(guī)模數(shù)據(jù)預(yù)處理能力。Hologres 通過 MCP 協(xié)議能夠?qū)⒑}中的海量數(shù)據(jù)轉(zhuǎn)化為實時可查詢的服務(wù)。

平臺管理層:提供了統(tǒng)一 Data+AI 數(shù)據(jù)治理體系,用戶可通過 DataWorks Copilot 智能助手和智能體 Agent,通過自然語言交互實現(xiàn)數(shù)據(jù)開發(fā)、數(shù)據(jù)分析與治理全流程。

應(yīng)用場景層:當(dāng)前數(shù)智一體計算平臺已覆蓋 RAG 增強(qiáng)檢索、LLM 大模型訓(xùn)練、MLOps 運維等多種 AI 工程化場景及需求。我們希望企業(yè)可以基于平臺之上便捷地獲取數(shù)據(jù)與 AI 的能力,真正實現(xiàn)“數(shù)據(jù)驅(qū)動業(yè)務(wù),AI 創(chuàng)造價值”。

為 AI 而生:ODPS 的四大核心升級

1、超大規(guī)模數(shù)據(jù)處理能力,支撐 AI 算力爆發(fā);在 AI 時代,大模型訓(xùn)練需要處理海量數(shù)據(jù),對算力提出了極高要求。ODPS 通過云原生架構(gòu),實現(xiàn)了數(shù)十萬臺集群的彈性調(diào)度,峰值數(shù)據(jù)處理能力達(dá)50億次/秒。阿里云智能集團(tuán)計算平臺事業(yè)部大數(shù)據(jù)產(chǎn)品總監(jiān)陳守元介紹到:“LLM 基模訓(xùn)練過程中往往需要突發(fā)調(diào)用數(shù)十萬 CPU 和數(shù)萬 GPU,以通義千問為例,ODPS 的即開即用、按量付費模式為其節(jié)省了90%以上的成本?!?/p>

2、多模態(tài)數(shù)據(jù)存儲與計算,打破AI數(shù)據(jù)邊界;著 AI 時代的到來,數(shù)據(jù)逐漸呈現(xiàn)多元化,包含文本、圖片、視頻等多種類型,非結(jié)構(gòu)化數(shù)據(jù)占比超過80%。ODPS 推出湖倉一體方案,支持文本、圖像、音視頻等多模態(tài)數(shù)據(jù)的統(tǒng)一存儲。

在計算方面,ODPS-MaxCompute 推出面向 Python 開發(fā)生態(tài)的分布式計算框架 MaxFrame,統(tǒng)一 Python 編程接口,提供高效的分布式計算能力,部分算子相比用戶本地自建性能提升3倍以上,計算、運維成本降低50%。MaxFrame 同時支持 AI Funtion 能力,可通過簡易的編程接口調(diào)用內(nèi)置大模型,對 MaxCompute 表中的海量數(shù)據(jù)進(jìn)行離線處理。 同時,ODPS- Hologres 在高性能實時數(shù)據(jù)分析的基礎(chǔ)上,提供了面向多模態(tài)數(shù)據(jù)和 RAG 場景的檢索增強(qiáng)特性,與 Deepseek/通義等大模型結(jié)合構(gòu)建企業(yè)級 RAG 知識庫,減少大模型問答幻覺,提升知識更新與問答速度,性能領(lǐng)先開源30%-40%。

3、近實時計算實現(xiàn)極致性價比;AI 時代企業(yè)用戶不僅追求性能,更追求極致性價比。阿里云智能計算平臺事業(yè)部 MaxCompute 研發(fā)負(fù)責(zé)人張治國重點介紹了 ODPS 在計算范式上的創(chuàng)新:ODPS 通過增量計算引擎(DLMV)和近線查詢(MaxQA),填補(bǔ)了實時與離線之間的空缺。增全量一體的計算能夠極大地優(yōu)化整體計算資源,并且提供一個更穩(wěn)定的環(huán)境、更強(qiáng)大的計算能力。MaxQA 引擎通過在實現(xiàn)近實時場景下的查詢性能優(yōu)化,能夠在獨享的查詢計算資源池中,對管控鏈路、查詢優(yōu)化器、執(zhí)行引擎、存儲引擎及緩存機(jī)制等多個環(huán)節(jié)進(jìn)行全面優(yōu)化,顯著減少響應(yīng)時間,提升數(shù)據(jù)效率。

4、AI賦能數(shù)據(jù)價值變現(xiàn);數(shù)據(jù)無應(yīng)用不價值。AI 讓數(shù)據(jù)價值從“人分析數(shù)據(jù)”到“AI 直接變現(xiàn)業(yè)務(wù)價值”,讓數(shù)據(jù)價值更加顯性化。MaxCompute Notebook 通過結(jié)合 MaxFrame 分布式計算框架,支持通過 SQL 與 Python 相結(jié)合,輕松訪問 MaxCompute 中海量數(shù)據(jù),進(jìn)行 Data + AI 一體化數(shù)據(jù)分析、數(shù)據(jù)科學(xué)計算、AI模型數(shù)據(jù)處理。ODPS-DataWorks Copilot 智能助手提供 SQL/Python 代碼自動生成和智能補(bǔ)全等服務(wù),數(shù)據(jù)開發(fā)分析平均提效35%。 ODPS-Hologres 及 DataWorks 發(fā)布 MCP Server 服務(wù),為客戶提供基于自然語言的用戶交互界面及智能化產(chǎn)品體驗。

總結(jié)

在 AI Native 時代,數(shù)據(jù)與 AI 的融合已不再是選擇題,而是必答題。阿里云將持續(xù)深耕 Data+AI 雙引擎,助力企業(yè)加速智能化落地,共同邁向數(shù)智未來。

繼續(xù)閱讀與本文標(biāo)簽相同的文章

分享至:

你可能感興趣 換一換

分享到微信朋友圈 ×
打開微信,
使用“掃一掃”即可將網(wǎng)頁分享至朋友圈。