Amazon S3 Vectors: первое облачное хранилище с поддержкой векторов

Amazon анонсировал S3 Vectors - первое облачное объектное хранилище с нативной поддержкой векторов.

Теперь можно хранить и искать огромные массивы эмбеддингов напрямую в Amazon S3, без необходимости разворачивать отдельные векторные базы данных. Экономия на хранении и обработке - до 90% по сравнению с существующими решениями.

Что нового:

• Появился специальный тип бакетов - vector buckets. В каждом можно создать до 10 000 векторных индексов, в каждом индексе - десятки миллионов векторов.

• К каждому вектору можно прикреплять метаданные (даты, категории или любые ключ-значение), а затем фильтровать результаты поиска по этим параметрам.

• Система сама оптимизирует хранение и обработку векторов, обеспечивая максимально низкую стоимость и высокую производительность по мере роста данных.

• Субсекундная скорость поиска - векторы можно искать и сравнивать практически мгновенно.

• Гибкая интеграция с Amazon Bedrock Knowledge Bases и SageMaker Unified Studio для построения RAG систем, чат-ботов и генеративных AI-приложений.

• Интеграция с OpenSearch: редко используемые векторы хранятся в S3 Vectors, а востребованные быстро перемещаются в OpenSearch для сверхбыстрого поиска.

Подписывайтесь на Telegram Сергей Булаев AI 🤖.