什麼是資料湖庫？

資料湖庫 vs. 資料湖與資料倉儲

當我們談論資料湖庫時，我們參考了目前資料儲存區域平台的合併使用方式。

• 資料湖 (湖倉一體中的「湖倉」)：資料湖是資料科學家主要使用的低成本儲存體儲存區域，也是業務分析師、產品經理及其他一般使用者類型的儲存體。這是一個大數據概念。各種組織來源的不結構化原始資料會流入湖中，通常會在載入資料倉儲和建置資料集之前暫存。
  
  
  探索資料湖
  
  
• 資料倉儲 (湖倉一體中的「內部」)：資料倉儲是資料湖中不同種類的儲存儲存區域，資料倉儲儲存已處理和結構化的資料、針對特定目的進行策劃，並以指定格式儲存。此資料通常由業務使用者查詢，業務使用者在分析工具中使用已準備的資料來進行報表與預估。資料倉儲通常包含資料管理功能，例如資料清理和擷取 / 載入 / 轉換 (ETL)。
  
  
  探索資料倉庫

因此，資料湖庫如何結合這兩個想法？一般而言，資料湖庫會移除資料湖與資料倉儲之間的孤島牆。這意謂著可以在低成本和彈性儲存資料湖到資料倉儲之間輕鬆移動資料，反之亦然，讓您輕鬆存取資料倉儲的管理工具來導入綱要和治理，通常是由機器學習和人工智慧來進行資料清理。結果會建立一個資料儲存區域，整合負擔得起、非結構化的資料湖集合，以及資料倉儲堅實的準備工作。資料湖庫藉由提供空間，在使用為業務用途準備資料的工具和功能時，從策劃的資料來源收集資料，可加速流程。資料湖庫是資料倉儲，概念上源自 1980 年代早期的現代化資料導向世界。

資料湖庫的功能

瞭解資料湖庫的一般概念後，讓我們更深入了解相關的特定元素。資料湖庫提供許多熟悉歷史資料湖和資料倉儲概念的片段，但將其合併成對現今數位世界更新的、更有效率的方法。

資料管理特色

資料倉儲通常提供資料管理功能，例如資料清除、ETL 和綱要強制實行。這些技術被帶入資料湖庫中，作為快速準備資料的方法，可讓來自策劃來源的資料自然共同運作，並做好進一步分析和商業智慧 (BI) 工具的準備。

開啟的儲存格式

使用開放且標準化的儲存格式，意味著來自策劃資料來源的資料大幅增加，能夠共同運作並準備進行分析或報告。

彈性儲存

將運算與儲存資源分開的功能，可視需要輕鬆擴充儲存。

支援串流處理

許多資料來源都直接從裝置使用即時串流。與標準資料倉儲相比，資料湖庫更能支援這種類型的即時擷取。隨著全球與 Internet of Things 裝置整合變得越來越重要，即時支援也越來越重要。

多元化工作量

由於資料湖庫整合了資料倉儲和資料湖的功能，因此它是許多不同工作負載的理想解決方案。從業務報告到資料科學團隊到分析工具，資料湖庫的固有特質可以支援組織內的不同工作負載。

資料湖庫的優點：現代化資料平台

透過建立資料湖庫，組織可以利用統一的資料平台簡化整體資料管理流程。資料湖庫可以分解多個儲存庫之間的孤島牆，取代個別的解決方案。此整合為精選的資料來源建立更有效率的端對端流程。這會帶來一些好處。

• 較少管理：藉由使用資料湖庫，任何與其連結的來源都可存取與合併使用資料，而非從原始資料擷取資料，並準備在資料倉儲內工作。
• 更好的資料治理：資料湖庫透過合併資源和資料來源來簡化和改善治理，並以標準化的開放綱要建置，讓對安全性、度量、以角色為基礎的存取和其他關鍵管理元素有更深入的控制。
• 簡化的標準：源自 1980 年代的資料倉儲，當連線能力非常有限時，就表示組織內通常會建立區域化的綱要標準，甚至是部門。現今，許多類型的資料都有開放的綱要標準，而資料湖庫則透過以重疊的標準化綱要擷取多個資料來源來簡化流程，充分利用此標準。
• 提高成本效益：資料湖庫建置的基礎架構可分隔運算和儲存，讓您輕鬆新增儲存體，而不需要增加運算能力。透過簡單使用的低成本資料儲存體，建立符合成本效益的擴展。

雖然有些組織會建置資料湖庫，但有些組織會購買資料湖庫雲端服務。

瞭解為何 OCI 是建立湖倉一體的最佳地點

隨著每日過去，越來越多的資料來源在全球傳送大量資料。對任何組織而言，此結構化與非結構化資料的組合持續是一項挑戰。資料湖倉儲將這些不同的輸出連結、關聯和分析成單一可管理的系統。