数据管理是什么？

数据管理是一种关于安全、高效、经济地收集、存储和使用数据的实践，其目标是帮助人、企业和联网设备在策略和法规的范围内优化数据使用，进而做出明智的决策并采取行动，为企业创造尽可能高的收益。在今天，企业越来越依赖数据这一无形资产来创造价值，强大的数据管理策略比以往更加重要。

现代企业需要通过一系列任务、策略、步骤和实践来管理数字数据。数据管理的范围非常广泛，包括：

• 在一个多样化的数据层中创建、访问和更新数据
• 跨多个云和本地环境存储数据
• 确保高可用性，实施灾难恢复
• 在不断增长的多样化的应用、分析和算法中使用数据
• 确保数据安全，保护数据隐私
• 按照保留时间表和合规性要求归档和删除数据

因此，一个理想的数据管理策略应全面解决用户和管理员活动、数据管理技术功能、监管法规要求以及企业从数据中获取价值的需求等 4 大问题。

当今的数据管理系统

在今天，企业需要一种强大的数据管理解决方案来高效管理一个多样化、统一的数据层中的数据。而数据管理系统一般基于数据管理平台而构建，涵盖数据库、数据湖和数据仓库、大数据管理系统、数据分析及其他方面。

在数据管理系统中，所有这些要素协同作业，以“数据使用程序”的形式为企业提供数据管理功能、分析功能和算法，帮助企业管理应用数据，处理应用产生的数据。目前，尽管很多工具都可以帮助数据库管理员 (DBA) 自动处理许多传统管理任务，但由于大多数数据库部署的规模和复杂性的原因，人工干预仍然不可或缺。而每当需要人工干预时，出错几率就会升高。对此，减少手动数据管理是新型数据管理技术，即自治数据库的核心目标。

大数据管理系统

从某种意义上说，大数据就是大量、大规模的数据。但是，从格式上来讲，大数据比传统数据要广泛得多，收集速度也非常快。在现实中，社交媒体（如 Facebook）每天或每分钟产生的所有数据就是大数据的形象体现。这种大规模、多样化、高速产生的数据既是企业的宝贵资产，同时也带来了极其严峻、复杂的管理挑战。

随着从相机、社交媒体、音频记录和物联网 (IoT) 设备等收集的数据越来越多，大数据管理系统应运而生。这些系统一般致力于解决三个基本问题：

• 大数据集成：汇总、转换各种类型的数据（从批量数据到流数据）以便其他用户使用。
• 大数据管理：使用对象存储方法，在数据湖或数据仓库中高效、安全、可靠地存储和处理数据。
• 大数据分析：：通过数据分析揭示洞察，利用机器学习和 AI 可视化技术构建模型。

如今，许多企业正利用大数据改善和加速产品开发、预测性维护、客户体验、安全性和运营效率，等等。未来，随着大数据的规模不断增长，企业也将迎来越来越多的机遇。

数据管理的挑战

如今，数据管理的大多数挑战源于业务的快速发展以及不断加速的数据扩散。面对规模不断增长、类型日益多样化、生成速度越来越快的数据，现代企业需要更加高效的管理工具。目前企业面临的数据管理挑战主要包括：

• 不知道自己拥有哪些数据：如今，企业从传感器、智能设备、社交媒体和摄像机等日益多样化的来源收集和存储数据。但是，如果不知道自己拥有哪些数据，数据存储在什么位置以及应如何使用数据，那么这些数据就毫无用处。
• 避免数据层扩展后性能下降：如今企业每时每刻要捕获、存储和使用比过去更多的数据。为了在不断扩展的整个数据层上维持峰值响应水平，企业需要持续监视数据库响应的问题类型，随着查询变更来调整索引，同时避免性能受到影响。
• 满足不断变化的合规要求：面对高度复杂、多辖区、不断变化的监管法规，企业需要简化数据审查，确保全面符合最新要求或修订后的要求（如有修订），尤其需要高效检测、跟踪和监视个人身份信息 (PII)，满足日益严格的全球隐私保护法规。
• 无法将数据用于新用途：仅仅是收集和识别数据并不能创造任何价值，企业还需要处理数据。然而，如果要花费大量时间和精力才能转换数据，分析也失去了意义，数据价值也无从谈起。
• 紧跟数据存储变化：在新的数据管理时代，企业将数据存储在多个系统中，包括数据仓库和非结构化数据湖（将所有格式的所有数据存储在单一信息库中）。对此，数据科学家需要轻松、快速地将数据转换为符合各种分析需求的结构、格式或模型。

数据管理的优秀实践

要想应对数据管理挑战，企业需要一系列全面的成熟可靠的优秀实践。以下优秀实践可帮助现代企业轻松应对当今的主要数据管理挑战（视数据类型和行业而定）：

• 通过创建发现层来识别数据：依托数据层之上的发现层，分析人员和数据科学家可以高效搜索和浏览数据集，将数据转化为可用资产。
• 开发数据科学环境，高效重用数据：数据科学环境可以最大限度地自动化处理数据转换工作，为您理顺数据模型创建和评估。换言之，您可以利用一系列专业工具消除手动数据转换，加速新模型的假设和测试过程。
• 利用自治技术确保在不断扩展的数据层上实现卓越性能：自治数据功能可利用 AI 和机器学习持续监视数据库查询，并随着查询变更不断优化索引。籍此，数据库时刻都能快速响应，DBA 和数据科学家也能摆脱耗时的手动任务。
• 利用数据发现功能满足合规要求：新型数据科学工具可利用数据发现功能审查数据，识别需检测、跟踪和监视哪些连接链，确保您满足多辖区合规要求。面对全球范围内越来越多的监管法规，数据发现对于风险和安全管理人员将变得越来越重要。
• 使用通用查询层管理多种形式的数据存储：新型数据科学技术支持数据管理信息库协同作业，能够消除信息库之间的差异。借助跨多种数据存储的通用查询层，数据科学家、分析人员和应用可以便捷地访问数据，既无需知道数据的存储位置，也无需手动转换数据格式。

数据管理的进化

随着数据成为一种新的商业资本，许多企业发现数据对于提前识别趋势、制定决策和采取有效行动，超越竞争对手至关重要 — 这早已是众多数字化初创企业和行业颠覆者的共识。而为了充分发挥数据的价值，它们积极寻求更加有效的数据管理方法。

与此同时，在企业内部，DBA 的数据管理职责也在不断变化。随着繁琐、耗时的工作不断减少，DBA 能够 专注处理更具战略性的问题，并通过一系列数据建模和安全性计划，在云端为企业提供关键数据管理支持。