Стабильность ИИ и выпуск ARM Легкая модель Tex-To-Audio оптимизирована для быстрого поколения на границе

Реклама

Стабильность AI разработала новую модель Text-Audio Generation Artificial Intelligence (AI) в партнерстве с ARM. Объявленная в среду, новая модель получила название Stable Audio Open Small, и, как говорят, генерирует короткие аудио -образцы с использованием текстовых подсказок. Лондонская фирма ИИ заявила, что модель легкая и оптимизирована, чтобы полностью работать на процессорах ARM. Говорят, что он имеет время быстрого поколения, что делает его полезным для массовых вариантов использования. Аудио-модель с открытым исходным кодом доступна для загрузки с GitHub и обнимающего лица.

Stability AI выпускает стабильный звук Open Small

В сообщении новостей, фирма AI подробно описала новую крупную языковую модель. Это дистиллированная версия стабильной Audio Open Model, которая была выпущена в июне 2024 года и может генерировать до 47 секунд звука. Меньшая модель текста к Аулье была разработана с акцентом на более высокую скорость генерации и меньший размер.

Стабильный аудио Open Small – это модель параметров 341 миллиона, которая может генерировать до 11 секунд звука. Компания утверждает, что может генерировать образец аудио менее чем за восемь секунд, работая на местном уровне на смартфоне. Интересно, что AI и ARM стабильности объявили о сотрудничестве с генеративным созданием звука на мобильном мире конгресса (MWC) 2025.

Приходя к архитектуре и обучению, стабильный звук Open Small – это скрытая диффузионная модель, основанная на архитектуре трансформатора. Он обучен набору данных из 4,86,492 аудиозаписей. Компания заявила, что все аудиофайлы лицензированы. Для кондиционирования текста использовалась общедоступная предварительно обученная модель T5. Фирма AI использовала алгоритм состязательного релятивистского-контрастию (ARC) на фазе после тренировки, чтобы улучшить приверженность быстрому приверженности и увеличить скорость вывода. Из-за его небольшого размера его можно развернуть на смартфонах с двигателем, а также на краевых устройствах. Модель также может использоваться в сценариях, где имеют значение для поколения и отзывчивости в реальном времени. Базу можно найти в списке GitHub. Модель искусственного интеллекта доступна для коммерческого и некоммерческого использования в соответствии с лицензией сообщества AI разрешающей стабильности.