Исследователи из Google обнародовали свои планы по созданию новой модели пространственно-временного распространения под названием Lumiere, которая превратит текст или изображение в реалистичное видео, созданное искусственным интеллектом (ИИ), с возможностями редактирования по требованию.
Люмьер призван изображать «реалистичное, разнообразное и последовательное движение» посредством того, что он называет «архитектурой пространства-времени U-Net». Это мгновенно генерирует всю продолжительность видео за один проход модели.
https://twitter.com/hila_chefer/status/1749972800243212364?ref_src=twsrc%5Etfw
Люмьер обучался на наборе данных из 30 миллионов видео и текстовых подписей, хотя источник видеоданных не упоминался — горячая тема в мире ИИ и закона об авторском праве. На данный момент модель может генерировать 80 кадров со скоростью 16 кадров в секунду.
Пользователи X называют эту разработку Google «невероятным прорывом», «современным» и даже предполагают, что в следующем году генерация видео «сойдёт с ума».
Googles new video model Lumiere can stylize motion by looking at a single image, and it looks pretty good.
Generative video is gonna get crazy this year you guys
pic.twitter.com/x1hNxpdHXR
— Nick St. Pierre (@nickfloats) January 24, 2024
Данные внутри сети показывают, что киты Dogecoin за последний день значительно увеличили покупки, что может…
Эфириум (ETH) упал на 10,3% по сравнению с максимумами прошлой недели после недавнего спада на…
Протокол ретейкинга Ethereum EigenLayer заверил сообщество, что его протокол не имеет уязвимостей после инцидента, когда…
По словам его основателя Чарльза Хоскинсона, недавнее обновление хард-форка Chang в сентябре сделало блокчейн Cardano…
Рынок Биткоин сталкивается со смешанными прогнозами, вызванными как техническим анализом, так и внешними факторами, такими…
«Древний» биткоин-кит, который добывал BTC в первые два месяца существования сети Биткоин, перевел больше BTC…