Компанія Google представила революційну технологію генерації відео під назвою Lumiere. Ця нейромережа здатна створювати реалістичні динамічні зображення на основі текстових описів.
Lumiere має унікальну архітектуру, що дає змогу генерувати відеоролики цілком за один прохід. На відміну від інших систем, які спочатку створюють ключові кадри, а потім заповнюють проміжки, в Lumiere весь процес відбувається одночасно. Це дає неперевершену плавність і реалістичність кінцевого результату.
Завдяки інноваційному підходу, Lumiere здатна:
- Перетворювати текст у відео;
- Оживляти статичні зображення;
- Створювати відео в будь-якому заданому стилі;
- Редагувати готові ролики за текстовими інструкціями.
Для навчання Lumiere інженери Google використовували 30 мільйонів відео з відповідними текстовими описами. На вхід нейромережа отримує текст, а на виході генерує 5-секундне відео з роздільною здатністю 1024х1024 пікселів.
У Google розуміють потенційні ризики подібних технологій. Lumiere може бути використана для створення фейків і шкідливого контенту. Тому компанія має намір розробляти спеціальні інструменти для виявлення упередженості та випадків зловживання. Це дасть змогу забезпечити безпечну та етичну роботу нейромережі.
