摘要:2025年1月15日,云器科技舉行了云器Lakehouse產品開放注冊發布會。
2025年1月15日,云器科技舉行了云器Lakehouse產品開放注冊發布會。這標志著這家專注于數據基礎設施的科技公司,正式向全球用戶開放體驗其創新的云湖倉產品。
云器Lakehouse開放注冊
云器科技CEO喻思成宣布云器Lakehouse正式開放注冊,同時宣布了產品已經完成了在全球七大主流云平臺的適配,并且已經在大部分云平臺開服。這意味著云器提供了統一的數據底座,讓企業可以在異構云環境中獲得一致的數據平臺體驗。
云器Lakehouse:基于增量計算的云湖倉平臺
喻思成表示,十年前“云”讓計算像水電一樣觸手可及,今天云器的開放注冊:旨在讓數據和AI更普惠,像煤氣爐一樣觸手可及——不需要專業團隊,不需要開源自建。就是這次云器開放注冊的意義,開放注冊即所謂GA——General Available,就是“你只管寫SQL,其它的交給云器。”
云器Lakehouse完成了全球七大主流云平臺適配
云器Lakehouse產品采用了Single-Engine和通用增量計算技術。據云器科技CTO關濤介紹,通過深度優化的全Native C++實現的向量化引擎,并得益于軟件、硬件技術、網絡技術的突破,Lakehouse產品表現出多面且優異的性能,以在批處理領域為例,云器Lakehouse在標準TPC-DS 10TB測試中展現出比開源Spark快10倍的性能優勢。
關濤在發布會上分享了引擎性能突破背后的技術改進項,并逐條解析了性能提升的關鍵因素:自研的基于Cascades模型的CBO優化器帶來2倍性能提升,Native引擎實現提供3倍性能提升,直連調度方案實現1.3倍提升,以及默認開啟的自動緩存帶來1.3倍性能提升。此外,云器Lakehouse還實現了MPP和BSP兩種調度模式的融合架構,為不同場景提供最優性能。
統一數據、統一引擎、統一體驗
在產品能力方面,云器科技Lakehouse產品總監曲寧分享了“統一數據、統一引擎、統一體驗”的設計理念,并詳細分享數據平臺的架構設計。曲寧詳細介紹了平臺的四大核心能力:
?全面Serverless化的計算服務,支持秒級彈性伸縮
?基于增量計算實現統一計算模式,可實現ETL鏈路的大幅簡化
?Data+AI融合分析能力,支持對企業所有數據資產的統一管理
?一體化的開發治理平臺Lakehouse Studio,提供數據團隊開發運維數據的全家桶套件
發布數據智能產品功能
值得關注的是,云器科技在此次發布會上還重點展示了數據與AI的結合能力。云器科技AI產品總監孟碩表示,企業已普遍認識到構建AI就緒的知識庫系統是當前AI投資的最佳切入點。為提升企業數據與AI融合能力,云器科技全面升級數據平臺,新增RAG就緒層,整合向量檢索、倒排索引及語義引擎等關鍵功能。基于升級后的平臺架構,推出兩款創新應用產品:智能對話式數據分析工具Lakehouse DataGPT,和智能開發助手Lakehouse Copilot,兩款重要產品功能,致力于讓企業數據資產更易于被AI利用和訪問。
Lakehouse DataGPT基于云器統一的數據底座,在對話式BI分析場景中,可以準確理解復雜的業務語境,將用戶的自然語言準確轉化為數據查詢,并提供清晰的推理過程展示,確保分析結果的可信度。這些創新有效降低了企業構建AI應用的技術門檻,加速了企業數據智能化轉型。
云器提出“通用增量計算”的首個行業標準-SPOT
此次發布會,云器展現的一大亮點是增量計算技術——既通過只計算數據變化部分,提升計算效能,保持高性能的同時顯著降低計算成本。關濤談到增量計算技術的巨大潛力,并提出“增量計算將成為繼批處理、流計算、交互分析之后的第四代主流計算模式。”特別的,關濤強調了云器在增量計算技術前沿的實踐,提出“通用增量計算”概念,旨在讓通用計算不再只是于狹窄場景下具備優化意義,而是在更普遍的場景實裝,甚至包括對UDF的支持。
通用增量計算的定義
作為業界首個提出并落地通用增量計算(Generic Incremental Computing,GIC)技術的企業,云器科技CTO關濤在發布會上系統性地闡述了這一創新技術。通用增量計算是一種同時面向高性能和低延遲優化的新計算模式,當上游數據持續變更時,系統只計算數據變化的部分并與之前的查詢結果合并,從而以最小的計算成本快速生成最新結果。不同于傳統流計算中的增量計算,GIC采用統一的計算邏輯,可以同時支持批處理、流處理和交互式分析三種場景。
通用增量計算的SPOT技術標準
關濤在發布會上公布了行業首個通用增量計算的技術標準——SPOT技術標準,旨在促進交流推動行業技術創新。用來推動更多創新和行業交流。
通用增量計算的技術標準-SPOT
SPOT標準:
?S-Standard SQL with Full Synatx/Semantics
?P-Performance
?O-Open Format
?T-Trande-off seamlessly between T+0 and T+1
CTO關濤分享了過去幾年云器實現通用增量計算技術的經驗和實現路徑,預告即將在未來向行業公開更多重磅的客戶案例。并表示未來幾個月內將發布《通用增量計算技術白皮書》,以推動這項技術的發展。
體驗開箱即用的云湖倉
筆者在會后立刻嘗試注冊試用云器Lakehouse產品,在不到5分鐘的時間就完成了從產品的注冊到運行測試SQL的完整鏈路;除了能夠快速分析數據,筆者也嘗試了云器Lakehouse的數據導入、運維、管理功能,直觀的感受是,它不僅提供一個數據處理分析的引擎,也讓我獲得了一整套大數據分析平臺的組件能力。這是原來在互聯網大廠和業內頭部數據型企業才能配備的數據處理和管理能力,現在通過注冊賬號就能獲得。
——數據技術普惠正在發生。
觀看本次發布會的回放,可以訪問云器科技官網https://www.yunqi.tech/open2025
下載本次演講的PPT材料,可以關注云器科技公眾號,對話框回復“OPEN2025”獲得完整演講材料下載
近日,在北京未來科學城管理委員會和北京昌平產業發展投資基金管理人昌發展集團的共同推動下,北京昌平產業...
近日,名創優品MINISO憑借其創新的全球品牌戰略以及與哈利·波特IP的深度聯名合作,再次成為市場矚...
2024年12月24日,哈爾濱松花江索道廣場迎來了一場別開生面的盛宴,“大紅雙巴 魅力啟程”喜迎亞冬...
近日,由東疆綜合保稅區管理委員會指導,全球租賃業競爭力論壇、東疆租賃研究院和中國·東疆租賃產業(人才...
投資家網(www.51baobao.cn)是國內領先的資本與產業創新綜合服務平臺。為活躍于中國市場的VC/PE、上市公司、創業企業、地方政府等提供專業的第三方信息服務,包括行業媒體、智庫服務、會議服務及生態服務。長按右側二維碼添加"投資哥"可與小編深入交流,并可加入微信群參與官方活動,趕快行動吧。