什麼是資料湖倉儲？

資料湖倉儲 vs. 資料湖 vs. 資料倉儲

當我們談論資料湖倉儲時，我們指的是合併使用當前現有資料存儲庫平台：

• 資料湖 (資料湖倉儲中的「湖倉」)：資料湖 是一種低成本的存儲庫，主要供資料科學家使用，但也供業務分析師、產品經理及其他一般類型的最終使用者使用。這是一個大數據概念。各種組織來源的不結構化原始資料會流入湖中，通常會在載入資料倉儲和建置資料集之前暫存。
  
  
  深入瞭解資料湖
  
  
• 資料倉儲 (湖倉中的「倉庫」)：資料倉儲是不同於資料湖的儲存體儲存區域，資料倉儲儲存已處理和結構化的資料、針對特定目的進行策劃，並以指定格式儲存。此資料通常由業務使用者查詢，業務使用者在分析工具中使用已準備的資料來進行報表與預估。資料倉儲通常包含資料管理功能，例如資料清理和擷取 / 載入 / 轉換 (ETL)。

因此，資料湖庫如何結合這兩個想法？一般而言，資料湖倉儲會移除資料湖與資料倉儲之間的孤島牆。這意謂著可以在低成本和彈性儲存資料湖到資料倉儲之間輕鬆移動資料，反之亦然，讓您輕鬆存取資料倉儲的管理工具來導入綱要和治理，通常是由機器學習和人工智慧來進行資料清理。結果會建立一個資料儲存區域，整合負擔得起、非結構化的資料湖集合，以及資料倉儲堅實的準備工作。資料湖庫藉由提供空間，在使用為業務用途準備資料的工具和功能時，從策劃的資料來源收集資料，可加速流程。在某種程度上，資料湖倉儲是資料倉庫，概念源自 1980 年代初，重新啟動了現代化資料導向世界。

資料湖倉儲的功能

瞭解資料湖庫的一般概念後，讓我們更深入了解相關的特定元素。資料湖庫提供許多熟悉歷史資料湖和資料倉儲概念的片段，但將其合併成對現今數位世界更新的、更有效率的方法。

資料管理功能

資料倉儲通常提供資料管理功能，例如資料清除、ETL 和綱要強制實行。這些技術被帶入資料湖庫中，作為快速準備資料的方法，可讓來自策劃來源的資料自然共同運作，並做好進一步分析和商業智慧 (BI) 工具的準備。

開放儲存格式

使用開放且標準化的儲存格式，意味著來自策劃資料來源的資料大幅增加，能夠共同運作並準備進行分析或報告。

彈性儲存

將運算與儲存資源分開的功能，可視需要輕鬆擴充儲存。

支援串流處理

許多資料來源都直接從裝置使用即時串流。與標準資料倉儲相比，資料湖庫更能支援這種類型的即時擷取。隨著全球與 Internet of Things 裝置整合變得越來越重要，即時支援也越來越重要。

多元化工作負載

由於資料湖庫整合了資料倉儲和資料湖的功能，因此它是許多不同工作負載的理想解決方案。從業務報告到資料科學團隊到分析工具，資料湖庫的固有特質可以支援組織內的不同工作負載。

資料湖倉儲的優點：現代化資料平台

藉由建立資料湖庫，組織可以利用統一的現代化資料平台，簡化其整體資料管理流程。資料湖庫可以分解多個儲存庫之間的孤島牆，取代個別的解決方案。此整合為精選的資料來源建立更有效率的端對端流程。這會建立一些福利：

• 較少管理：藉由使用資料湖庫，任何與其連結的來源都可存取與合併使用資料，而非從原始資料擷取資料，並準備在資料倉儲內工作。
• 更好的資料治理：資料湖庫透過合併資源和資料來源來簡化和改善治理，並以標準化的開放配置建置，從而更有效地控制安全性、度量、以角色為基礎的存取，以及其他關鍵管理元素。
• 簡化的標準：源自 1980 年代的資料倉儲，當連線能力非常有限時，就表示組織內通常會建立區域化的綱要標準，甚至是部門。現今，許多類型的資料都有開放的綱要標準，而資料湖庫則透過擷取多個具有重疊標準化綱要的資料來源來簡化流程，充分利用這種技術。
• 提高成本效益：資料湖庫是建置在現代化基礎架構中，可分隔運算和儲存，讓您輕鬆新增儲存體，而不需要增加運算能力。透過簡單使用的低成本資料儲存體，建立符合成本效益的擴展。

瞭解為何 OCI 是建立資料湖倉儲的最佳位置

越來越多的資料來源在全球範圍內傳送大量資料。對任何組織而言，此結構化與非結構化資料的組合持續是一項挑戰。資料湖倉儲將這些不同的輸出連結、關聯和分析成單一可管理的系統。