Lakehouse para Apache Iceberg (antes BigLake)

Moderniza tu base de datos con Lakehouse de Google. Migra Hadoop heredado a Cloud Storage sin servidores y unifica los datos entre nubes consultando Iceberg y Delta Lake directamente en BigQuery. El catálogo de REST de Iceberg de Lakehouse elimina los silos y ofrece un entorno de ejecución interoperable para Spark, Trino y Flink. Con la compatibilidad del catálogo de Hive, puedes modernizar fácilmente las cargas de trabajo de Hadoop a Iceberg.

Trae tus canalizaciones de Iceberg existentes y lee o escribe en esas tablas sin problemas con BigQuery o Spark administrado, mientras modernizas fácilmente con las capacidades avanzadas de BigQuery. Potencia la ciencia de datos ejecutando ETL de Spark y la IA de BigQuery en las mismas tablas de Iceberg sin mover los datos. Crea agentes de análisis conversacional en BigQuery que trabajen con tus datos en S3.

Potencia el análisis multimodal con la IA de BigQuery combinando tablas Iceberg estructuradas con datos no estructurados usando ObjectRefs de BigQuery para la inferencia de SQL único. Entrenar modelos de la plataforma de agentes de Gemini Enterprise con viajes en el tiempo para depurar el desvío de datos. Federa catálogos REST globales en una malla de datos unificada, analiza registros a gran escala de forma económica y crea modelos directamente en notebooks integrados para acelerar tus flujos de trabajo de IA.

Accede a una experiencia de Spark sin problemas. Ejecuta SQL, Spark y Python en una sola copia de datos de Iceberg con IDE unificados. La nueva extensión de VS Code Antigravity actúa como un socio de IA para generar canalizaciones, depurar código y automatizar CI/CD a partir de lenguaje natural. Además, nuestro Lightning Engine vectorizado acelera la ejecución de Spark hasta 4.5 veces, sin necesidad de realizar cambios en el código.

Aprovecha la escala de BigQuery mientras mantienes un almacenamiento flexible. Ejecutar transacciones de varias instrucciones en BigQuery para actualizar varias tablas de Iceberg como una sola unidad atómica, lo que garantiza una coherencia de nivel financiero. Usa la compatibilidad avanzada de BigQuery con el entorno de ejecución y la partición para Iceberg para crear tablas particionadas o agrupadas que aprovechen la reducción de bloques para una ejecución de consultas de alta velocidad y rentable.

Potencia los agentes de IA basados en eventos unificando tus datos transaccionales y analíticos. Automatiza la replicación continua de CDC desde Spanner y AlloyDB directamente en tablas de Iceberg de Lakehouse. Luego, usa consultas continuas de SQL para supervisar estos datos de transmisión, ejecutar inferencias de IA de forma instantánea y activar acciones posteriores, lo que proporciona inteligencia en tiempo real para tus cargas de trabajo operativas más importantes.

Knowledge Catalog proporciona una capa de administración unificada descubriendo automáticamente tablas de Iceberg en Cloud Storage y registrando sus metadatos directamente en el catálogo de entornos de ejecución de Lakehouse. Esta integración te permite definir políticas de seguridad centralizadas que garantizan un control de acceso coherente a nivel de fila y columna en BigQuery y en motores de procesamiento de código abierto.