Як користуватися Kling AI – китайською нейромережею для генерації відео

Хочете створювати професійні відео, не маючи камери та навичок монтажу? Це можливо завдяки нейромережам. У цій статті ми розглянемо, як користуватися Kling AI – китайською нейромережею для генерації відео за текстом або картинкою. Чи зможе вона скласти конкуренцію Sora від OpenAI? Давайте розбиратися.

Kling AI – це передова нейромережа для створення відео, розроблена пекінською компанією Kuaishou. Вона дає змогу генерувати ролики тривалістю до 120 секунд з роздільною здатністю 1080p і з частотою 30 кадрів за секунду. Розробники стверджують, що їхня ШІ-модель чудово розбирається у фізиці і точно моделює складні рухи.

Раніше Kling AI була доступна тільки користувачам з Китаю, але з 24 липня відкрила доступ для всього світу. Тепер будь-хто може зареєструватися на сайті https://klingai.com/ за допомогою email і безкоштовно створювати до 6 роликів по 5 секунд щодня. Інтерфейс англійською мовою, але розібратися нескладно.

Для початку роботи з Kling AI потрібно:

1. Зайти на сайт і натиснути кнопку "Sign in for free credits" у правому верхньому куті.
2. У вікні, що відкрилося, вибрати "Sign up for free" і ввести свій email і пароль.
3. Підтвердити реєстрацію, ввівши код, який прийде вам на електронну пошту. Перевірте папку "Спам", якщо лист не прийшов у "Вхідні".
4. Ввійти у свій новий акаунт на Kling AI.

У Kling AI доступні два основні режими генерації відео:

• Text to Video – створення ролика на основі текстового опису.
• Image to Video –  "пожвавлення" завантаженої картинки.

Розберемо обидва варіанти докладніше.

Генерація відео за текстом

Щоб згенерувати відео за текстовим описом:

• На головній сторінці виберіть "AI Videos", а потім "Text to Video".
• У полі "Prompt" введіть опис бажаного відео англійською мовою. Наприклад: "a witch on a broomstick flying through the woods and laughing" - "відьма на мітлі літає в лісі і сміється при цьому". Що докладнішим буде опис, то краще нейромережа зрозуміє вашу ідею.
• У розділі "Settings" налаштуйте креативність, співвідношення сторін і рух камери. Поки що тривалість відео зафіксована на 5 секундах. Для генерації 10 секундного відео потрібно перейти на платний тариф від 5 доларів на місяць.
• За бажанням можна вказати, чого НЕ має бути в ролику, в полі "Negative Prompt". Наприклад: "blur, distortions, cartoon style".
• Натисніть кнопку "Generate" і почекайте кілька хвилин, поки нейромережа згенерує відео. Готовий ролик з'явиться в редакторі.

Кожна генерація коштує 10 кредитів. Новим користувачам безкоштовно дається 66 кредитів на день – цього вистачить на 6 роликів по 5 секунд.

Генерація відео за картинкою

Створення відео на основі зображення відбувається схожим чином:

• Виберіть режим "Image to Video" у розділі "AI Videos".
• Завантажте картинку у форматі JPG або PNG. Kling AI проаналізує її та згенерує анімацію.
• За бажанням додайте текстовий опис того, що має відбуватися в ролику. Це поле не обов'язкове - нейромережа може додумати дію сама.
• Налаштуйте параметри відео (крім співвідношення сторін і руху камери) і запустіть генерацію.

У цьому режимі завантажене зображення стане першим кадром згенерованого відео. Нейромережа добудує анімацію, виходячи зі змісту картинки і текстового опису, якщо він вказаний.

Щоб згенерувати картинку, дотримуйтесь такої інструкції:

•  На головній сторінці сервісу натисніть "AI Images".
• Напишіть інструкцію – промпт і завантажте картинку-референс (опціонально).
• Виберіть формат зображення – доступні варіанти 1:1, 16:9, 4:3, 3:2, 2:3, 3:4 і 9:16.

Ось наприклад, що вийде, якщо ввести промпт "A witch is witching in the woods. She stands in a circle of candles and reads an incantation from a magic book" – "відьма чаклує в лісі. стоїть у колі зі свічок і читає замовляння з магічної книги".

Відео, згенеровані Kling AI, виглядають досить реалістично і деталізовано. Нейромережа непогано справляється з анімацією облич, міміки, рухів людей і тварин. Текстури поверхонь, вода, дим та інші складні елементи теж опрацьовуються добре.

Однак поки що ролики не дотягують до рівня якості Sora AI від OpenAI. Деякі рухи можуть бути неприродними, а риси облич змінюються під час повороту голови. Зустрічаються артефакти і "шуми" на зображенні.

Також треба враховувати обмеження поточної безкоштовної версії Kling AI:

• Максимальна довжина ролика – 5 секунд. У майбутньому обіцяють збільшити до 120 секунд.
• Неможливо генерувати відео без водяного знака і у високій роздільній здатності. Ці функції доступні в платних тарифах.
• Не має розширених налаштувань руху камери та деяких інших параметрів.

Проте, для аматорських експериментів і невеликих проектів можливостей Kling AI цілком достатньо. А якість генерації напевно буде поліпшуватися з розвитком нейромережі.

Для того щоб "спробувати" генерацію фото і відео, використовуйте тариф Free – він включає 66 кредитів (Inspiration Credits) на день, яких вистачає на генерацію 6 роликів по 5 секунд. Невикористані кредити згорають через 24 години, а перевищити ліміт не можна.

Сервіс пропонує на вибір три місячні тарифи:

• Standard – 10 доларів і 660 кредитів;
• Pro – 37 доларів і 3000 кредитів;
• Premier – 92 долари і 8000 кредитів.

Також є річний, піврічний і квартальний тариф. Усі нові користувачі після реєстрації отримують знижку в 50%. Скористатися нею можна протягом 2 днів.

Таким чином, поки що Kling AI можна використовувати абсолютно безкоштовно, але з певними обмеженнями. Це хороший варіант, щоб протестувати можливості нейромережі і зрозуміти, чи підходить вона для ваших завдань.

Kling AI – багатообіцяючий інструмент для генерації відео на основі тексту і зображень. Він уже показує вражаючі результати, хоча поки і поступається за якістю деяким аналогам на кшталт Sora AI.

Серед переваг Kling AI варто виділити:

• Достатньо реалістичну анімацію облич, рухів, текстур;
• Зрозумілий інтерфейс англійською мовою;
• Можливість генерувати відео як за текстом, так і за картинкою;
• Можливість генерувати зображення;
• Щедрий безкоштовний ліміт – 66 кредитів на день.

Але є й обмеження:

• Максимальна довжина ролика – 5 секунд (у безкоштовному режимі);
• Не генерується без водяного знака і з високою роздільною здатністю;
• Зустрічаються артефакти і неприродні рухи.

Загалом, Kling AI – цікава і перспективна нейромережа для створення фото і відео. Вона навряд чи повністю замінить зйомку і монтаж, але може стати в нагоді для генерації фонів, анімованих прев'ю, ілюстрацій до статей і сторіз.

Якщо вам потрібні короткі атмосферні ролики і ви готові миритися з деякими недоліками, обов'язково спробуйте Kling AI. Це чудовий спосіб познайомитися з можливостями генерації відео на базі ШІ.