Tablas de Amazon S3

Las tablas de Amazon S3 ofrecen el primer almacén de objetos en la nube con compatibilidad integrada con Apache Iceberg y agilizan el almacenamiento de datos tabulares a escala. La optimización continua de las tablas escanea y reescribe automáticamente los datos de las tablas en segundo plano, logrando un rendimiento de consulta hasta 3 veces más rápido en comparación con las tablas Iceberg no administradas. Estas optimizaciones de rendimiento seguirán mejorando con el tiempo. Además, S3 Tables incluye optimizaciones específicas para cargas de trabajo de Iceberg que ofrecen hasta 10 veces más transacciones por segundo en comparación con las tablas de Iceberg almacenadas en buckets de S3 de uso general. Para obtener más información sobre las mejoras en el rendimiento de las consultas de S3 Tables, consulte el blog.

Gracias a la compatibilidad de las tablas de S3 con el estándar de Apache Iceberg, sus datos tabulares se pueden consultar fácilmente con motores de consulta populares de AWS y de terceros, como Amazon Athena, Redshift, EMR y Apache Spark. Utilice las tablas de S3 para almacenar datos tabulares, como las transacciones de compra diarias, los datos de los sensores de streaming o las impresiones de anuncios, como una tabla de Iceberg en S3, y optimice el rendimiento y el costo a medida que sus datos evolucionan mediante el mantenimiento automático de tablas. Lea el blog para obtener más información.

Las tablas de S3 proporcionan almacenamiento en S3 diseñado específicamente para almacenar datos estructurados en el formato Apache Parquet. Dentro de un bucket de tablas, puede crear tablas como recursos de primera clase directamente en S3. Estas tablas se pueden proteger con permisos a nivel de tabla definidos en políticas basadas en la identidad o en los recursos, y se puede acceder a ellas mediante aplicaciones o herramientas compatibles con el estándar de Apache Iceberg. Al crear una tabla en el bucket de tablas, los datos subyacentes en S3 se almacenan como datos de Parquet. A continuación, S3 mantiene los metadatos necesarios para que sus aplicaciones puedan consultar los datos de Parquet. Los buckets de tablas incluyen una biblioteca de clientes que utilizan los motores de consulta para navegar y actualizar los metadatos de Iceberg de las tablas de su bucket de tablas. Esta biblioteca, junto con las API de S3 actualizadas para las operaciones de tablas, permite que varios clientes lean y escriban datos en sus tablas de forma segura. Con el tiempo, S3 optimiza automáticamente los datos subyacentes de Parquet al reescribir o “compactar” sus objetos. La compactación optimiza los datos en S3 para mejorar el rendimiento de las consultas y reducir los costos. Para obtener más información, lea la guía del usuario.