Google Cloud ha lanzado una vista previa de BigLake, su motor de almacenamiento de lago de datos, como parte de su objetivo de eliminar todas las “restricciones de datos” y disolver la barrera entre los lagos de datos y los almacenes.
Durante una sesión informativa previa, Google explicó que los usuarios no tienen que copiar los datos, moverlos a través de sus almacenes de objetos, como en Google Cloud Storage, S3 o Azure en un entorno multi-nube, y se obtiene un único lugar para acceder a todos los datos.
Además, puede soportar cualquier formato de archivo abierto como Parquet, así como motores de procesamiento de código abierto como Apache Spark o Beam, y una variedad de formatos de tabla como Delta e Iceberg.
Asimismo, Google ha anunciado la formación de la Data Cloud Alliance, que incluye a Confluent, Databricks, Dataiku, Deloitte, Elastic, Fivetran, MongoDB, Neo4j, Redis y Starburst como socios fundadores.
Los miembros de la alianza proporcionarán infraestructura, APIs y soporte de integración para permitir la portabilidad de datos y la accesibilidad a través de numerosas plataformas y productos en una variedad de escenarios. Para mejorar la portabilidad de los datos, también colaborarán en nuevos modelos de datos, procesos e interfaces de plataforma comunes para el sector.
Vertex AI Workbench, que ha sido diseñado para integrarse directamente con un conjunto completo de productos de IA y datos, incluyendo BigQuery, Serverless Spark y Dataproc, fue presentado como parte de la Cumbre de la Nube de Datos del gigante tecnológico para llevar los datos y los sistemas de ML a una única interfaz para que los equipos puedan tener conjuntos de herramientas comunes a través de la analítica de datos, la ciencia de datos y el aprendizaje automático.