AWS анонсировала предварительный запуск функции запроса метаданных объектов для корзин Amazon S3. Эта функция позволяет пользователям запрашивать метаданные объектов в корзинах S3 с помощью инструментов, совместимых с Iceberg, таких как Athena, Redshift, QuickSight и Spark. Это решает проблему управления огромными объемами данных в S3, поскольку пользователи теперь могут искать объекты по определенным критериям, таким как ключ, размер и теги. С помощью этой функции пользователи могут улучшить свои рабочие процессы анализа данных, обработки данных и обучения ИИ. Интересным аспектом этой функции является ее способность автоматически собирать подробные метаданные при добавлении или изменении объектов S3. Эти метаданные хранятся в полностью управляемых таблицах Apache Iceberg, что обеспечивает эффективное выполнение запросов. Это будет особенно полезно для организаций, которые используют S3 для хранения больших наборов данных и нуждаются в эффективном способе поиска определенных объектов в этих наборах данных. Эта функция упростит обнаружение данных и повысит общую эффективность.