README.md

GigaAM API Webserver in Docker

GigaAM HTTP-сервер для автоматического распознавания речи (ASR), предоставляющий API, совместимое с OpenAI-клиентами, и обеспечивающий гибкую настройку распределённой обработки аудиофайлов. Система оптимизирована для развертывания и маршрутизации запросов между несколькими Docker-контейнерами, основанными на GigaAM.

Если планируется обучение моделей с использованием Flash Attention, то надо будет выполнить ещё и:

pip install setuptools psutil torch flash-attn --no-build-isolation

https://github.com/salute-developers/GigaAM

https://habr.com/ru/companies/sberdevices/articles/805569/

Описание
Конвейеры
0 успешных
0 с ошибкой
Разработчики