Diferentes tipos de metadatos

Los metadatos son datos que se utilizan para definir los tipos de datos. Describen principalmente la información de los datos en sí, incluyendo la fuente, el tamaño, el formato u otras características. En los campos de una base de datos, los metadatos se utilizan para interpretar el contenido de la misma. lago de datos Insight (DLI) crea una tabla y define metadatos, que constan de tres columnas: nombre, tipo y descripción. En este artículo, analizaremos en detalle los diferentes... tipos de metadatos y cómo se utilizan.

Tipos de metadatos

1. Clasificación por tipos de metadatos

• Metadatos sobre datos básicos: Los datos básicos se refieren a todos los datos gestionados por las fuentes de datos, almacenes de datos, almacenes de datosy aplicaciones. Los metadatos de datos básicos incluyen la definición y la descripción completa de la estructura.
• Metadatos para el procesamiento de datos: información sobre la carga de datos, el procesamiento de actualizaciones, el procesamiento analítico y la gestión, como la extracción de datos, transformación de datosy reglas de agregación.
• Metadatos sobre la estructura organizativa de la empresa: incluye específicamente datos de gestión e información relacionada con la empresa, como el acceso de los usuarios a los almacenes de datos, las fuentes de datos y la información de permisos de los data marts.

2. Clasificación por nivel de abstracción

• Metadatos a nivel de concepto: Incluye la descripción completa del negocio, como la definición de las principales entidades comerciales, características y sus interrelaciones, uso del sistema, consultas definidas, vistas y aplicaciones existentes.
• Metadatos de nivel lógico: Incluye el esquema relacional de la base de datos, el modelo lógico multidimensional, etc., y las reglas para la extracción/transformación de datos se describen generalmente en pseudocódigo o lenguaje matemático.
• Metadatos de nivel físico: Esto incluye código SQL correspondiente a reglas de negocio, archivos de índice para relaciones y código para aplicaciones analíticas.

3. Clasificación por tareas realizadas por metadatos

Según la clasificación de tareas de los metadatos en el almacén de datos, se pueden dividir en metadatos estáticos y metadatos dinámicos.

metadatos estáticos Se relaciona principalmente con las estructuras de datos e incluye los siguientes elementos:

• Nombre-clase: un símbolo utilizado para diferenciar datos al proporcionar identificación al sistema.
• Descripción-clase: Describe varios elementos de datos en el almacén de datos.
• Clase de formato: Proporciona las reglas de expresión de datos en el almacén de datos.
• Tipo de datos: El tipo de datos en el almacén de datos.
• Relación-clase: Describe la relación entre diversos objetos de datos en el almacén de datos. Por ejemplo, existe una relación de compra entre un cliente y un artículo.
• Clase de dominio: Se utiliza para describir el rango válido de valores para los datos en el almacén de datos.
• Clase de regla de negocio: Se utiliza para describir las reglas que deben cumplir los datos del almacén de datos durante el procesamiento empresarial. Por ejemplo, Customer_ID representa el número del cliente, empezando por A para clientes colectivos y B para clientes individuales.

Metadatos dinámicos Se relaciona principalmente con el estado y el uso de los datos, incluidos los siguientes elementos:

• Calidad de los datos mesa: Se utiliza para describir la precisión, integridad, consistencia y validez de los datos en el almacén de datos.
• Información estadística: Contabiliza los usuarios que acceden a los datos, el tiempo de acceso y el número de accesos. Estas estadísticas son de gran utilidad para mejorar el rendimiento del almacén de datos.
• Clase de estado: Se utiliza para monitorear el estado del almacén de datos. Por ejemplo, la fecha de la última copia de seguridad de los datos, el tiempo necesario para la copia de seguridad, las condiciones de error, etc. El estado de funcionamiento de estos sistemas ayuda a los administradores de almacenes de datos a comprender su rendimiento.
• Clase de procesamiento: Se utiliza para describir las características de uso y gestión del sistema de almacenamiento de datos. Por ejemplo, cómo usar los datos, una fórmula general que los resume, etc.

4. Clasificación desde el punto de vista del usuario

Este método de clasificación está relacionado con el propósito para el que se utilizan los metadatos. Desde la perspectiva del usuario, este método de clasificación no tiene un estándar unificado y, en la práctica, suele dividirse según los principios de hábito, viabilidad y aplicación.

Generalmente se divide en dos categorías: metadatos técnicos y metadatos comercialesLos metadatos técnicos se refieren al desarrollo, mantenimiento y gestión de todos los metadatos de análisis, diseño, desarrollo, gestión y otros metadatos estrechamente relacionados con la tecnología en el entorno de las tecnologías de la información. Constituyen el vínculo técnico que conecta las herramientas de desarrollo, las aplicaciones y los sistemas. Los metadatos empresariales facilitan la comprensión de los servicios de un entorno empresarial para los usuarios finales, facilitando la navegación y la consulta de datos para la interpretación de los objetivos y procesos empresariales.

Metadatos técnicos Incluye datos descriptivos para bases de datos, almacenes de datos, diccionarios de datos de data marts, códigos de reglas de conversión de datos, etc. Por ejemplo:

• Información descriptiva sobre la arquitectura y esquema del sistema operativo, almacén de datos y sistema OLAP, estructura de tablas, restricciones de atributos, información de vista, etc.
• Una descripción de las asignaciones y dependencias a nivel físico y de implementación entre diferentes fuentes de información, almacenes de datos y sistemas OLAP.
• Extraer metadatos de programación, incluida la extracción de la relación compleja de programación y la asignación entre los datos de origen y los datos de destino.
• Metadatos para sincronización horaria.
• Información de permisos del usuario.

Metadatos empresariales Incluye documentación específica de la aplicación (perfiles de usuario, mapas de almacenamiento, consejos de uso, ayudas de navegación, etc.), conceptos y términos comerciales, detalles de consultas e informes predefinidos, información contextual, descripciones de pesos y medidas, formatos de fecha, diccionarios, tabla de encabezados de tema, etc. Por ejemplo:

• Modelo de concepto de negocio.
• Modelo de datos multidimensionales, principios de agregación de dimensiones, categorías de dimensiones, cubos de datos, data marts.
• Dependencias entre modelos conceptuales de negocio y modelos físicos.
• Admite la búsqueda y navegación de conceptos comerciales.
• Soporte de navegación y exploración orientada a conceptos de negocio.
• Admite consultas inmediatas dinámicas y minería de datos.

Conclusión

Gracias por leer nuestro artículo y esperamos que pueda ayudarle a comprender mejor los diferentes tipos de metadatos y cómo se utilizan. Si desea obtener más información sobre los tipos de metadatos, le recomendamos visitar Flujo de SQL de Gudu Para más información.

Como uno de los Las mejores herramientas de linaje de datos Disponible en el mercado hoy en día, Gudu SQLFlow no solo puede analizar archivos de script SQL, obtener linaje de datos, y realizar una visualización, pero también permitir a los usuarios proporcionar el linaje de datos en formato CSV y realizar una visualización. (Publicado por Ryan el 26 de junio de 2022)