Живые нейроны помогли создать самую дешевую нейросеть по созданию видео

В Сан-Франциско был представлен Mischief 1 — нейросеть, создающая видеоролики на основе изображений и работающая в пять раз шустрее базовой версии. Выпустила эту разработку компания The Biological Computing Co.

Базу модели составляет Wan 2.2 — открытая нейросеть для видеогенерации, параметры («веса») которой доступны каждому разработчику. Усовершенствовать её авторы смогли, применив принципы, выявленные при исследовании живых нейронов, культивируемых ими в лаборатории. Как утверждают создатели, новинка не уступает исходной модели по качеству, однако ролики создаёт в 5 раз быстрее и в разы дешевле.

За одну секунду видео платят половину цента: ролик длительностью 5 секунд обойдётся в 2,5 цента, а 100 клипов — в $2,50. Создатели называют это минимальной ценой в своём классе моделей. Благодаря такой стоимости авторы могут проверять больше идей, не выходя за прежний бюджет — сопоставлять варианты и дорабатывать замысел, не экономя на каждой попытке. Разработчикам же дешевле встраивать генерацию роликов в продукты, которыми люди пользуются ежедневно.

«Великие истории рождаются в доработке идеи — и именно здесь обычно заканчиваются время и деньги. Скорость и доступность Mischief 1 позволили нам продвинуть работу гораздо дальше», — отметил Джастин Хакни, сооснователь студии Wonder Studios, тестировавшей модель в своих проектах. По его словам, такой подход дает творцам больше времени на саму работу.

TBC выращивает нейроны в лаборатории, измеряет, как они обрабатывают информацию, и переносит найденные принципы в программное обеспечение. Сами клетки остаются в лаборатории, а клиенты получают код, который работает на обычных видеокартах и добавляет менее 0,1% к объему базовой модели. В отличие от большинства существующих способов ускорения ИИ, которые опираются на стандартные инженерные приемы, оптимизации TBC берут начало в биологии, а не в инженерных расчетах, и потому их трудно повторить.