Lil Yachty zmienia się w Jokera w wirusowym deepfake’u AI, który może „zastąpić każdego”

Wirusowy, fałszywy film krążący w Internecie zastąpił rapera Lil Yachty’ego Jokerem dzięki użytkownikowi, który użył nowego narzędzia sztucznej inteligencji o nazwie Viggle AI.

Narzędzia AI są w modzie. Firmy takie jak Google i OpenAI opracowują narzędzia takie jak Sora, które mogą nie tylko generować obrazy i wideo, ale także tworzyć wirusowe deepfake, co ostatnio wywołało kontrowersje wśród Microsoftu.

Teraz w sieci pojawiło się wirusowe wideo, które zastępuje występ na żywo rapera Lil Yachty’ego rolą Jokera w wykonaniu Joaquina Phoenixa. Jak podzielił się w mediach społecznościowych zwolennik sztucznej inteligencji Barsee , ekspert twierdzi, że narzędzie AI użyte do stworzenia deepfake’a „zastąpi każdego z filmu”.

Jednak rzeczywistość związana z produkcją filmu sięga nieco głębiej niż użycie pojedynczego narzędzia AI.

Eksperyment Viggle AI 💙 To niesamowite narzędzie do przenoszenia stylu. Szczegóły i link do Discorda poniżej 👇 Jak zawsze, jeśli podoba Ci się ta zawartość, uprzejmie polub i udostępnij! pic.twitter.com/1qW8H0MuwX

— AIWarper (@AIWarper) 8 kwietnia 2024 r

Deepfake został stworzony przez użytkownika o imieniu AI Warper. Do wyprodukowania ostatecznego filmu wykorzystali narzędzie o nazwie Viggle AI, kilka dodatkowych modeli sztucznej inteligencji i program Adobe After Effects. Według oficjalnej strony internetowej Viggle AI opiera się na „pierwszym podstawowym modelu wideo-3D z rzeczywistym zrozumieniem fizyki”.

AI Warper wyjaśnia metodologię deepfake’a, wyjaśniając, że najpierw wykonali rotoskopię Lil Yachty’ego, aby stworzyć maskę, a następnie wprowadzili obraz Jokera do AI Viggle. Następnie skomponowany film został poddany dodatkowemu modelowi ruchu „AnimateDiff” wraz z kilkoma innymi narzędziami AI, wyszkolonymi na kultowym Jokerze Joaquina Phoenixa, aby osiągnąć ostateczny wynik.

Tworzenie filmu rzekomo zajęło „mniej niż 5 minut”, ale narzędzia i wiedza wymagane do jego nakręcenia pozostają znacznie bardziej skomplikowane, niż mogłoby się wydawać na pierwszy rzut oka. Sama sztuczna inteligencja Viggle nie jest magicznym lekarstwem, ponieważ rotoskopowy wynik musiał zostać następnie wkomponowany z powrotem w oryginalny film, a następnie dopracowany w celu uzyskania ostatecznego filmu. Jednak wyniki są niezaprzeczalnie imponujące, jak na tak szybką pracę.