天下苦「ETL」久矣。
雖然數據工程中多的是「堆人堆時間」的奇葩招式,可 ETL 作業仍然讓人焦頭爛額:無法物理集中的大量數據,導致孤島林立;頻繁複制和搬運數據,導致高昂的存儲成本;業務側漫長的數據等待,IT 側繁重的任務運維;一邊是滯後的性能優化,另一邊是失控的計算成本;無序增長的複雜數據鏈路,導致質量管理複雜度激增;業務提出指標需求,需要反覆溝通確認口徑,再等待 IT 排期開發,指標交付不及時,且一致性難以保障……泥潭之深,「ETL 打工人」叫苦不迭。
「在業務需求百倍增長的當下,數據生產力能否也同步實現百倍提升?」2021 年初,Aloudata 創始人周衛林就早已透露出對未來的構想。
三年後的今天,未來照進現實。Aloudata 三款產品集結,依託自主研發的數據虛擬化引擎、數據語義引擎和主動元數據引擎描繪出一份自動化數據集成與管理的完美答卷,開創了「面向未來的 NoETL 數據工程架構」。
Aloudata 所提出的「NoETL」獨特架構思想與業內領先的 Data Fabric (數據編織)核心理念不謀而合。Data Fabric 作為 Gartner 2022 年「十大戰略性技術趨勢之首」,強調優化異構數據的發現和訪問,實現極致敏捷、高效的數據交付、使用和治理。二者模式的相似之處在於,都是通過數據管理過程的高度自動化,提供比傳統數據管理更多的價值。
從創新和實踐的角度,NoETL 可謂對 Data Fabric 構想的美好畫面構建了一條系統性的落地路徑:消除或減少傳統基於人工的 ETL 作業,例如繁重的鏈路搭建、運維任務和高企的預計算成本,最大程度實現 ETL 工程的自動化,無論何時,只要業務需要,相關的數據就能立即被調取和使用。隨著 Aloudata 日漸深入的前沿探索和更多的落地場景經驗積累, NoETL 數據工程的新範式正徐徐展開。
相較於很多企業,Aloudata 從沒有以一種「絕技在手,獨孤求敗」的心態進行創業,而是堅持從真實的業務場景和業務痛點著手,利用團隊多年積累的技術和專業經驗解決數智化轉型深水區的「頑疾」,在業務實踐中也能更快地看到成果。目前, Aloudata NoETL 解決方案已成功落地多家頭部企業的複雜數據環境,其自動化數據處理和智能化數據管理的效果得到了廣泛驗證,展示了 Data Fabric 理念在現代數據環境中的應用潛力。
三年磨礪,利刃出鞘。2023 年 12 月 15 日,Aloudata 攜 NoETL 產品家族正式亮相「NoETL!重構數據生產力」戰略與產品發布會。在瞬息萬變的數智化時代中,企業或許又多了一個勇立潮頭的選擇。