摘要:2025年1月15日,云器科技舉行了云器Lakehouse產(chǎn)品開放注冊發(fā)布會。
2025年1月15日,云器科技舉行了云器Lakehouse產(chǎn)品開放注冊發(fā)布會。這標志著這家專注于數(shù)據(jù)基礎(chǔ)設(shè)施的科技公司,正式向全球用戶開放體驗其創(chuàng)新的云湖倉產(chǎn)品。
云器Lakehouse開放注冊
云器科技CEO喻思成宣布云器Lakehouse正式開放注冊,同時宣布了產(chǎn)品已經(jīng)完成了在全球七大主流云平臺的適配,并且已經(jīng)在大部分云平臺開服。這意味著云器提供了統(tǒng)一的數(shù)據(jù)底座,讓企業(yè)可以在異構(gòu)云環(huán)境中獲得一致的數(shù)據(jù)平臺體驗。
云器Lakehouse:基于增量計算的云湖倉平臺
喻思成表示,十年前“云”讓計算像水電一樣觸手可及,今天云器的開放注冊:旨在讓數(shù)據(jù)和AI更普惠,像煤氣爐一樣觸手可及——不需要專業(yè)團隊,不需要開源自建。就是這次云器開放注冊的意義,開放注冊即所謂GA——General Available,就是“你只管寫SQL,其它的交給云器。”
云器Lakehouse完成了全球七大主流云平臺適配
云器Lakehouse產(chǎn)品采用了Single-Engine和通用增量計算技術(shù)。據(jù)云器科技CTO關(guān)濤介紹,通過深度優(yōu)化的全Native C++實現(xiàn)的向量化引擎,并得益于軟件、硬件技術(shù)、網(wǎng)絡(luò)技術(shù)的突破,Lakehouse產(chǎn)品表現(xiàn)出多面且優(yōu)異的性能,以在批處理領(lǐng)域為例,云器Lakehouse在標準TPC-DS 10TB測試中展現(xiàn)出比開源Spark快10倍的性能優(yōu)勢。
關(guān)濤在發(fā)布會上分享了引擎性能突破背后的技術(shù)改進項,并逐條解析了性能提升的關(guān)鍵因素:自研的基于Cascades模型的CBO優(yōu)化器帶來2倍性能提升,Native引擎實現(xiàn)提供3倍性能提升,直連調(diào)度方案實現(xiàn)1.3倍提升,以及默認開啟的自動緩存帶來1.3倍性能提升。此外,云器Lakehouse還實現(xiàn)了MPP和BSP兩種調(diào)度模式的融合架構(gòu),為不同場景提供最優(yōu)性能。
統(tǒng)一數(shù)據(jù)、統(tǒng)一引擎、統(tǒng)一體驗
在產(chǎn)品能力方面,云器科技Lakehouse產(chǎn)品總監(jiān)曲寧分享了“統(tǒng)一數(shù)據(jù)、統(tǒng)一引擎、統(tǒng)一體驗”的設(shè)計理念,并詳細分享數(shù)據(jù)平臺的架構(gòu)設(shè)計。曲寧詳細介紹了平臺的四大核心能力:
?全面Serverless化的計算服務(wù),支持秒級彈性伸縮
?基于增量計算實現(xiàn)統(tǒng)一計算模式,可實現(xiàn)ETL鏈路的大幅簡化
?Data+AI融合分析能力,支持對企業(yè)所有數(shù)據(jù)資產(chǎn)的統(tǒng)一管理
?一體化的開發(fā)治理平臺Lakehouse Studio,提供數(shù)據(jù)團隊開發(fā)運維數(shù)據(jù)的全家桶套件
發(fā)布數(shù)據(jù)智能產(chǎn)品功能
值得關(guān)注的是,云器科技在此次發(fā)布會上還重點展示了數(shù)據(jù)與AI的結(jié)合能力。云器科技AI產(chǎn)品總監(jiān)孟碩表示,企業(yè)已普遍認識到構(gòu)建AI就緒的知識庫系統(tǒng)是當前AI投資的最佳切入點。為提升企業(yè)數(shù)據(jù)與AI融合能力,云器科技全面升級數(shù)據(jù)平臺,新增RAG就緒層,整合向量檢索、倒排索引及語義引擎等關(guān)鍵功能。基于升級后的平臺架構(gòu),推出兩款創(chuàng)新應(yīng)用產(chǎn)品:智能對話式數(shù)據(jù)分析工具Lakehouse DataGPT,和智能開發(fā)助手Lakehouse Copilot,兩款重要產(chǎn)品功能,致力于讓企業(yè)數(shù)據(jù)資產(chǎn)更易于被AI利用和訪問。
Lakehouse DataGPT基于云器統(tǒng)一的數(shù)據(jù)底座,在對話式BI分析場景中,可以準確理解復(fù)雜的業(yè)務(wù)語境,將用戶的自然語言準確轉(zhuǎn)化為數(shù)據(jù)查詢,并提供清晰的推理過程展示,確保分析結(jié)果的可信度。這些創(chuàng)新有效降低了企業(yè)構(gòu)建AI應(yīng)用的技術(shù)門檻,加速了企業(yè)數(shù)據(jù)智能化轉(zhuǎn)型。
云器提出“通用增量計算”的首個行業(yè)標準-SPOT
此次發(fā)布會,云器展現(xiàn)的一大亮點是增量計算技術(shù)——既通過只計算數(shù)據(jù)變化部分,提升計算效能,保持高性能的同時顯著降低計算成本。關(guān)濤談到增量計算技術(shù)的巨大潛力,并提出“增量計算將成為繼批處理、流計算、交互分析之后的第四代主流計算模式。”特別的,關(guān)濤強調(diào)了云器在增量計算技術(shù)前沿的實踐,提出“通用增量計算”概念,旨在讓通用計算不再只是于狹窄場景下具備優(yōu)化意義,而是在更普遍的場景實裝,甚至包括對UDF的支持。
通用增量計算的定義
作為業(yè)界首個提出并落地通用增量計算(Generic Incremental Computing,GIC)技術(shù)的企業(yè),云器科技CTO關(guān)濤在發(fā)布會上系統(tǒng)性地闡述了這一創(chuàng)新技術(shù)。通用增量計算是一種同時面向高性能和低延遲優(yōu)化的新計算模式,當上游數(shù)據(jù)持續(xù)變更時,系統(tǒng)只計算數(shù)據(jù)變化的部分并與之前的查詢結(jié)果合并,從而以最小的計算成本快速生成最新結(jié)果。不同于傳統(tǒng)流計算中的增量計算,GIC采用統(tǒng)一的計算邏輯,可以同時支持批處理、流處理和交互式分析三種場景。
通用增量計算的SPOT技術(shù)標準
關(guān)濤在發(fā)布會上公布了行業(yè)首個通用增量計算的技術(shù)標準——SPOT技術(shù)標準,旨在促進交流推動行業(yè)技術(shù)創(chuàng)新。用來推動更多創(chuàng)新和行業(yè)交流。
通用增量計算的技術(shù)標準-SPOT
SPOT標準:
?S-Standard SQL with Full Synatx/Semantics
?P-Performance
?O-Open Format
?T-Trande-off seamlessly between T+0 and T+1
CTO關(guān)濤分享了過去幾年云器實現(xiàn)通用增量計算技術(shù)的經(jīng)驗和實現(xiàn)路徑,預(yù)告即將在未來向行業(yè)公開更多重磅的客戶案例。并表示未來幾個月內(nèi)將發(fā)布《通用增量計算技術(shù)白皮書》,以推動這項技術(shù)的發(fā)展。
體驗開箱即用的云湖倉
筆者在會后立刻嘗試注冊試用云器Lakehouse產(chǎn)品,在不到5分鐘的時間就完成了從產(chǎn)品的注冊到運行測試SQL的完整鏈路;除了能夠快速分析數(shù)據(jù),筆者也嘗試了云器Lakehouse的數(shù)據(jù)導(dǎo)入、運維、管理功能,直觀的感受是,它不僅提供一個數(shù)據(jù)處理分析的引擎,也讓我獲得了一整套大數(shù)據(jù)分析平臺的組件能力。這是原來在互聯(lián)網(wǎng)大廠和業(yè)內(nèi)頭部數(shù)據(jù)型企業(yè)才能配備的數(shù)據(jù)處理和管理能力,現(xiàn)在通過注冊賬號就能獲得。
——數(shù)據(jù)技術(shù)普惠正在發(fā)生。
觀看本次發(fā)布會的回放,可以訪問云器科技官網(wǎng)https://www.yunqi.tech/open2025
下載本次演講的PPT材料,可以關(guān)注云器科技公眾號,對話框回復(fù)“OPEN2025”獲得完整演講材料下載
在大城市的地圖上,地鐵是重要的脈絡(luò),以地鐵站為中心向外輻射的小區(qū)域,則是城市發(fā)展的重要節(jié)點。
隨著互聯(lián)網(wǎng)保險行業(yè)的快速變革,2025年的市場環(huán)境展現(xiàn)出前所未有的活力與挑戰(zhàn)。
植樹節(jié),這個全球性的節(jié)日,每年都在提醒著人們樹木對于地球生態(tài)和人類生活的重要意義。
承辦全運會為澳門文化體育產(chǎn)業(yè)及經(jīng)濟適度多元發(fā)展注入動力,也將拉動香港旅游、酒店等相關(guān)產(chǎn)業(yè)發(fā)展。
近年來,網(wǎng)絡(luò)交友已成為人們社交的新方式,然而其中卻隱藏著不少風險。
近年來,藥店行業(yè)經(jīng)歷了從門店數(shù)量暴增到閉店率持續(xù)上升的劇變,行業(yè)洗牌加速。
在鄉(xiāng)村振興的大潮中,技能培訓(xùn)成為河南農(nóng)民增收致富的新引擎。
2024年,物流行業(yè)在政策與市場雙重力量的推動下,迎來了顯著變革。
隨著春耕時節(jié)的到來,無人機技術(shù)正成為農(nóng)田管理的新寵。
投資家網(wǎng)(www.51baobao.cn)是國內(nèi)領(lǐng)先的資本與產(chǎn)業(yè)創(chuàng)新綜合服務(wù)平臺。為活躍于中國市場的VC/PE、上市公司、創(chuàng)業(yè)企業(yè)、地方政府等提供專業(yè)的第三方信息服務(wù),包括行業(yè)媒體、智庫服務(wù)、會議服務(wù)及生態(tài)服務(wù)。長按右側(cè)二維碼添加"投資哥"可與小編深入交流,并可加入微信群參與官方活動,趕快行動吧。