Wed. Nov 13th, 2024

Metadatos abiertos: Aprenda a descubrir, gestionar y colaborar con sus datos

By admin Jan 29, 2024

OpenMetaData es una plataforma integral que ofrece una variedad de funcionalidades, que incluyen descubrimiento de datos, linaje de datos, calidad de datos, observabilidad, gobernanza y colaboración en equipo. Es un proyecto de código abierto que ha ganado inmensa popularidad entre empresas de diversos sectores industriales, gracias a su vibrante comunidad y su adopción.

OpenMetaData se basa en un almacén de metadatos centralizado que utiliza API/estándares abiertos de metadatos. La plataforma admite conectores para una amplia gama de servicios de datos, lo que permite la gestión de metadatos de un extremo a otro. Esto brinda a los usuarios la libertad de desbloquear todo el potencial de sus activos de datos y obtener información que pueda respaldar una mejor toma de decisiones.

Con OpenMetaData, los usuarios pueden descubrir fácilmente sus activos de datos, comprender su linaje y garantizar la calidad de los datos. La plataforma también ofrece funciones de observabilidad que permiten a los usuarios monitorear sus canales de datos y garantizar que funcionen sin problemas. La gobernanza es otra característica clave de OpenMetaData, que permite a los usuarios gestionar sus activos de datos y garantizar el cumplimiento de los requisitos reglamentarios.

La colaboración también es un aspecto central de OpenMetaData, con características que permiten a los equipos trabajar juntos sin problemas, compartir conocimientos y colaborar en proyectos basados ​​en datos.

En resumen, OpenMetaData es una plataforma de gestión de metadatos todo en uno que permite a los usuarios descubrir, gestionar y colaborar en sus activos de datos. Su naturaleza de código abierto y su compatibilidad con API/estándares abiertos de metadatos, combinados con su amplia funcionalidad, lo convierten en una opción popular entre empresas de diversos sectores verticales.

Componentes de metadatos abiertos

Componentes

OpenMetadata incluye lo siguiente:

  • Esquemas de metadatos – Define abstracciones centrales y vocabulario para metadatos con esquemas para tipos, entidades y relaciones entre entidades. Esta es la base del Estándar Abierto de Metadatos. También admite la extensibilidad de entidades y tipos con propiedades personalizadas.
  • Almacén de metadatos – Almacena un gráfico de metadatos que conecta los activos de datos, el usuario y los metadatos generados por herramientas.
  • API de metadatos – Para producir y consumir metadatos basados ​​en esquemas para interfaces de usuario e integración de herramientas, sistemas y servicios.
  • Marco de ingesta – Un marco conectable para integrar herramientas e incorporar metadatos al almacén de metadatos, que admite alrededor de 55 conectores. El marco de ingesta admite almacenes de datos conocidos como Google BigQuery, Snowflake, Amazon Redshift y Apache Hive; bases de datos como MySQL, Postgres, Oracle y MSSQL; servicios de panel como Tableau, Superset y Metabase; servicios de mensajería como Kafka, Redpanda; y servicios de tuberías como Airflow, Glue, Fivetran, Dagster y muchos más.
  • Interfaz de usuario de OpenMetadata – Un lugar único para que los usuarios descubran y colaboren en todos los datos.

Características

Estas son algunas de las funciones admitidas en pocas palabras:

  • Colaboración de datos – Recibe notificaciones de eventos con feeds de actividades. Envíe alertas y notificaciones mediante webhooks. Agregue anuncios para notificar al equipo sobre los próximos cambios. Agregue Tareas para solicitar descripciones o flujos de trabajo de aprobación de términos del glosario. Agregue menciones de usuarios y colabore usando hilos de conversación.
  • Calidad de datos y perfilador – Pruebas estandarizadas y metadatos de calidad de datos. Agrupa pruebas relacionadas como Test Suites. Admite pruebas de calidad de datos SQL personalizadas. Tiene un panel interactivo para profundizar en los detalles.
  • Linaje de datos – Admite un rico linaje a nivel de columna. Filtra eficazmente consultas para extraer linaje. Edite el linaje manualmente según sea necesario y conecte las entidades con un editor sin código.
  • Funciones y políticas integrales – Maneja casos de uso complejos de control de acceso y equipos jerárquicos.
  • Ganchos web – Admite integraciones de webhooks. Integre con Slack, Microsoft Teams y Google Chat.
  • Conectores – Admite 55 conectores para varias bases de datos, paneles, canalizaciones y servicios de mensajería.
  • Glosario – Agregue un vocabulario controlado para describir conceptos y terminologías importantes dentro de su organización. Agregue glosarios, términos, etiquetas, descripciones y revisores.
  • Seguridad de datos – Admite Google, Okta, OIDC personalizado, Auth0, Azure, Amazon Cognito y OneLogin como proveedores de identidad para SSO. Además, admite autenticación basada en SAML para AWS SSO y Google.
  • Interfaz del administrador de secretos – Se comunica con cualquier almacén de gestión de claves.
  • Y mucho más…

Licencia

  • OpenMetadata se publica bajo licencia Apache, versión 2.0

Recursos

Etiquetas

Ingeniería de datos Minería de datos Ciencia de datos Base de datos Big Data Código abierto Licencia Apache JavaScript Java

By admin

Related Post

Leave a Reply

Your email address will not be published. Required fields are marked *