Red de Respuestas Legales - Asesoría legal - Almacén de datos y gestión de metadatosPrefacio Los datos en los sistemas de procesamiento de transacciones se utilizan principalmente para registrar y consultar condiciones comerciales. A medida que la tecnología de almacenamiento de datos continúa madurando, los datos empresariales se han convertido gradualmente en la base principal para la toma de decisiones. El almacén de datos es un tema orientado a la toma de decisiones, un sistema de base de datos orientado a la lectura con datos resumidos actuales e históricos. Su propósito es apoyar la toma de decisiones. El almacén de datos debe recopilar datos relevantes dentro y fuera de la empresa y adaptarlos a las necesidades de la toma de decisiones. El procesamiento organizacional puede informar eficazmente el proceso de toma de decisiones. Los datos de un almacén de datos se extraen y transforman de muchos sistemas de procesamiento empresarial. Con entornos de datos empresariales tan complejos, es especialmente importante gestionarlos y acceder a ellos de forma segura y eficiente. La clave para resolver este problema es gestionar los metadatos de forma científica y eficaz. Los metadatos son información descriptiva sobre los procesos de manipulación de datos y la estructura e importancia de una aplicación. Su objetivo principal es proporcionar una guía completa de recursos de datos. Los metadatos no solo definen las reglas de fuente, extracción y transformación de los datos en el almacén de datos, sino que el funcionamiento de todo el sistema de almacén de datos se basa en los metadatos. Conecta todos los componentes sueltos del sistema de almacén de datos para formar una estructura orgánica del todo. . Este artículo presenta primero la definición, función y significado de los metadatos y luego analiza el estado actual y los problemas de la gestión de metadatos en los sistemas de almacenamiento de datos. La estandarización de metadatos propone en última instancia los pasos y métodos de implementación para establecer un sistema de gestión de metadatos. Por definición tradicional, los metadatos son datos sobre datos. En los sistemas de almacenamiento de datos, los metadatos pueden ayudar a los administradores y desarrolladores del almacén de datos a encontrar los datos que les interesan con mucha facilidad. Los metadatos describen la estructura y el método de creación de datos en el almacén de datos. Según el propósito, los datos del almacén de datos se pueden dividir en dos categorías: metadatos técnicos y metadatos comerciales. Los metadatos técnicos son datos que almacenan los detalles técnicos de un sistema de almacén de datos y se utilizan para desarrollar y gestionar el almacén de datos. Incluye principalmente la siguiente información: La descripción de la estructura del almacén de datos incluye la jerarquía de las dimensiones de la vista del esquema del almacén, la definición de los datos exportados y la ubicación y el contenido del centro de datos. #;Arquitectura y patrones de almacenes de datos y mercados de datos en sistemas empresariales. Los algoritmos utilizados para la agregación incluyen algoritmos de definición de dimensiones y medidas, granularidad de datos, agregación y resumen de áreas temáticas, consultas e informes predefinidos. al entorno del almacén de datos incluye datos de origen y su contenido, partición de datos, extracción de datos, limpieza, reglas de transformación y reglas de actualización de datos. Los metadatos comerciales de seguridad (autorización de usuario y control de acceso) describen los datos en el almacén de datos desde una perspectiva comercial. Proporciona una capa semántica entre los usuarios y el sistema real, lo que permite que el personal empresarial que no comprende la tecnología informática comprenda los datos en el almacén de datos. Los metadatos comerciales incluyen principalmente los nombres de objetos del modelo de datos y los nombres de atributos expresados ​​en los términos comerciales del usuario de la información, el principio de acceso a los datos y la fuente de los datos, los métodos de análisis proporcionados por el sistema, las fórmulas y la información del informe incluyen específicamente los siguiente información: Modelo conceptual empresarial Esta es la información importante que deben proporcionar los metadatos empresariales. Representa información de alto nivel del modelo de datos empresariales, así como conceptos y relaciones comerciales en toda la empresa. Según este modelo empresarial, el personal empresarial que no comprende la tecnología de bases de datos y las declaraciones SQL también puede tener un conocimiento profundo de los datos en el almacén de datos. # ;El modelo de datos multidimensional es una parte importante del modelo conceptual empresarial. Le dice al analista de negocios qué dimensiones, cubos de datos y reglas de agregación hay en el mercado de datos. El cubo de datos aquí representa una organización multidimensional de tablas de hechos comerciales y tablas de dimensiones en un área temática determinada. #; Dependencia entre el modelo de concepto de negocio y los datos físicos. Los metadatos comerciales mencionados anteriormente solo representan la vista comercial de los datos y la relación correspondiente entre estas vistas comerciales y la jerarquía de dimensiones de los campos de la tabla en el almacén de datos real o la base de datos multidimensional. también debe reflejarse en el repositorio de metadatos. En el sistema de almacenamiento de datos, el mecanismo de metadatos admite principalmente los siguientes cinco tipos de funciones de gestión del sistema (1). ¿Qué datos hay en el almacén de datos? (2) Definir los datos para ingresar al almacén de datos y los datos generados desde el almacén de datos. (3) Registrar el progreso de la extracción de datos en función de la ocurrencia de eventos comerciales. (4) Registrar y detectar los requisitos y la implementación de la coherencia de los datos del sistema. (5) Medir la calidad de los datos. El almacén de datos no es tanto un proyecto de desarrollo de software como un proyecto de integración de sistemas[]. Debido a que su trabajo principal es integrar las herramientas de almacenamiento de datos necesarias para completar la extracción, transformación, carga, análisis OLAP y minería de datos de datos, como se muestra en la figura, su estructura típica consta de una capa de entorno de ejecución, una capa de almacenamiento de datos y una capa de negocio. capa La primera capa (capa del entorno de ejecución) se refiere a los sistemas OLTP relacionados con el negocio y algunas fuentes de datos externas en toda la empresa. La segunda capa se implementa extrayendo los datos relevantes de la primera capa a un área central. La tercera capa de la capa del almacén de datos es el diagrama de la capa empresarial, que se compone de varias herramientas para completar el análisis de los datos comerciales. El lado izquierdo de la figura es la gestión de metadatos, que desempeña un papel conector en los siguientes aspectos. #; Fácil de integrar y mantener metadatos en la base de datos de metadatos. En segundo lugar, es responsable de la transmisión de mensajes entre las herramientas de modelado, las herramientas de recopilación de datos y las herramientas de front-end del almacén de datos, y de coordinar el trabajo entre varios módulos y herramientas.