Техногігант Google представив новий інструмент Lumiere на базі штучного інтелекту (ШІ), який може створити або виправити зображення чи відео за допомогою тексту
Фото: freepik.com
Так, Lumiere здатен створювати рух, який виглядає реалістично і не має переривчастості. Це можливо завдяки тому, що програма створює всі відеокадри одночасно, а не використовує ключові кадри й вивчає, яким має бути рух.
Lumiere також використовує дифузійні імовірнісні моделі, які допомагають генерувати зображення. Це поєднується з просторово-часовою мережею U-Net, яка слугує архітектурою, що забезпечує тимчасове масштабування вгору і вниз, а також “блоки уваги”, які додаються до зображень.
Новий інструмент генеративного ШІ можна використовувати з багатьма іншими моделями, що допоможе створювати зображення та відео, які виглядатимуть набагато реалістичніше.
Читайте також: Samsung презентувала лінійку смартфонів з ШІ на базі технології Google
Як можна застосувати Lumiere
Сінемаграфія. Коли робиться анімація окремого фрагмента зображення. Наприклад, на картинці з вогнищем можна зробити рухливим вогонь. Або на картинці з чашкою кави анімувати пару.
Малювання. Об’єкт у відео замінюється на інший. Наприклад, можна відредагувати одяг людини або додати те, чого раніше в кадрі не було.
Стилізована генерація. Використовуючи один еталонний приклад, Lumiere може генерувати в цьому ж стилі.
Зображення у відео. Допомагає перетворити на відео будь-яке потрібне зображення.
Відео до відео. Дозволяє користувачам створювати відеозапис в іншому художньому стилі.
Текст у відео. Створення відео з текстового опису.
Стилізація відео. Тут Google показує як приклад відео з жінкою, яку ШІ редагує, щоб надати їй різного вигляду – ніби вона зроблена з паперу, квітів, конструктора.
Домальовування. Можна заповнити відсутній фрагмент з урахуванням сусідніх областей на відео. Наприклад, в центрі кадру є якась перепона, яку треба видалити, або збоку порожня чорна область. ШІ аналізує картинку і домальовує, наче все так і було.
Вас може зацікавити: Mastercard создала собственную модель генеративного ИИ
Наразі можна створювати відео тривалістю не більше 5 секунд. Також немає можливості робити відеопереходи та кілька ракурсів зйомки. Однак скоріше за все функціонал з часом буде розширено.
Важливо, що для використання Lumiere не підійде звичайний графічний процесор. Потрібно мати щось потужне, що керує графічною потужністю вашого комп’ютера, інакше інструмент просто не працюватиме.
Нагадаємо, Google запровадила два інструменти на базі штучного інтелекту (ШІ), які зроблять пошук більш швидким та зручним.
Компанія тестує нові інструменти, щоб зрозуміти, як генеративний ШІ робить пошук більш персоналізованим та інтуїтивно зрозумілим. Нещодавно Google перевіряла, як здатність ШІ розуміти природну мову дозволяє ставити запитання в Пошуку більш природним способом.
Ознайомтесь з іншими популярними матеріалами:
Інтернет-магазини отримають нові послуги Google Cloud
Google зізнався в порушенні прав користувачів: що сталось
Відстежувати користувачів по Google Maps стане неможливо: анонсовано оновлення
