Por qué es importante la semántica en la pila de datos moderna

Únase a altos ejecutivos en San Francisco los días 11 y 12 de julio para conocer cómo los líderes están integrando y optimizando las inversiones en IA para lograr el éxito. Más información

La mayoría de las empresas ahora están muy avanzadas en la remodelación de sus pilas de datos empresariales hacia arquitecturas que priorizan la nube. Mover la gravedad de los datos a plataformas centralizadas de datos en la nube ofrece un enorme potencial. Sin embargo, muchas organizaciones aún luchan por generar valor y demostrar resultados comerciales reales a partir de sus inversiones en datos y análisis.

El término "pila de datos moderna" se usa comúnmente para definir el ecosistema de tecnologías que rodean las plataformas de datos en la nube. Hasta la fecha, el concepto de capa semántica no se ha formalizado dentro de esta pila.

Cuando se aplica correctamente, una capa semántica forma un nuevo centro de gravedad del conocimiento que mantiene el contexto comercial y el significado semántico necesarios para que los usuarios creen valor a partir de los activos de datos empresariales. Además, se convierte en un centro para aprovechar los metadatos activos y pasivos para optimizar la experiencia de análisis, mejorar la productividad y administrar los costos de la nube.

¿Qué es la capa semántica?

Wikipedia describe la capa semántica como "una representación comercial de datos que permite a los usuarios interactuar con activos de datos utilizando términos comerciales como producto, cliente o ingresos para brindar una vista unificada y consolidada de los datos en toda la organización". Evento

Transformar 2023

Únase a nosotros en San Francisco los días 11 y 12 de julio, donde los altos ejecutivos hablarán sobre cómo han integrado y optimizado las inversiones en IA para lograr el éxito y cómo evitar errores comunes.

Regístrate ahora

El término se acuñó en la era de los almacenes de datos locales, cuando la infraestructura de análisis empresarial era costosa y tenía una funcionalidad muy limitada en comparación con las ofertas actuales. Si bien los orígenes de la capa semántica se remontan a los días de OLAP, el concepto es aún más relevante en la actualidad.

¿Qué es la pila de datos moderna?

Aunque el término "pila de datos moderna" se usa con frecuencia, hay muchas representaciones de lo que significa. En mi opinión, Matt Bornstein, Jennifer Li y Martin Casado de Andreessen Horowitz (A16Z) ofrecen la visión más clara de las arquitecturas emergentes para la infraestructura de datos moderna.

Haré referencia a este diagrama simplificado basado en su trabajo a continuación:

Esta representación sigue el flujo de datos de izquierda a derecha. Los datos sin procesar de varias fuentes fluyen a través de los servicios de ingesta y transporte a las plataformas de datos centrales que manejan el almacenamiento, la consulta, el procesamiento y la transformación antes de que los usuarios los consuman en diversas modalidades de análisis y salida. Además del almacenamiento, las plataformas de datos ofrecen motores de consulta SQL y acceso a utilidades de inteligencia artificial (IA) y aprendizaje automático (ML). Un conjunto de servicios compartidos atraviesa todo el flujo de procesamiento de datos en la parte inferior del diagrama.

¿Dónde está la capa semántica?

Una capa semántica está implícita...