Amazon обновил SageMaker Feature Store, добавив возможность пакетной записи и поиска записей. Этот сервис представляет собой полностью управляемый репозиторий для хранения и управления признаками моделей машинного обучения, обеспечивая низкую задержку при онлайн-обслуживании и поддержку как потоковой, так и пакетной загрузки данных.
Одной из основных проблем, с которыми сталкиваются команды, является необходимость выполнения большого количества API-вызовов для записи данных. Например, в системе обнаружения мошенничества, обрабатывающей 10,000 записей в секунду, необходимо выполнять 50,000 вызовов API в секунду для поддержания актуальности признаков. Это создает значительную нагрузку на систему и снижает общую производительность.
Новые функции SageMaker Feature Store помогут решить эти проблемы, улучшая производительность и упрощая управление данными. Это особенно важно для команд, работающих с высокопроизводительными пайплайнами, так как позволяет значительно сократить время и ресурсы, необходимые для управления признаками машинного обучения.