Dzięki tym 3 narzędziom AI mój dwuminutowy film instruktażowy stał się o wiele zabawniejszy i bardziej wciągający

Generatywna sztuczna inteligencja nie jest przeznaczona tylko do efektownych i ekscytujących projektów. Oto, jak wykorzystałem narzędzia AI, aby przekształcić film instruktażowy w coś znacznie bardziej atrakcyjnego.

Czy korzystałeś z narzędzi generatywnej sztucznej inteligencji, aby wprowadzić poprawki i ulepszenia, których w przeciwnym razie nie byłbyś w stanie wykonać (lub uzasadnić czas poświęcony na pracę)?

Bez pomocy AI, szczerze mówiąc, nie zawracałbym sobie tym głowy.

Dziś pokażę Wam, jak wybrałem i wykorzystałem trzy narzędzia AI, które pomogły ulepszyć krótki film informacyjny na mój kanał YouTube. Jedno narzędzie uratowało cały mały projekt, a inne poprawiły efekt końcowy. W tym projekcie będziemy korzystać z programu Adobe Photoshop Beta, Adobe Podcast i najnowszej wersji Final Cut Pro dla komputerów Mac firmy Apple.

Projekt

Znalazłem sposób na rozwiązanie problemu z moją Glowforge, wycinarką laserową używaną w wielu projektach twórców. Używam go do tworzenia dwukolorowych akrylowych etykiet do specjalnych adapterów, które wydrukowałem w 3D. Adaptery umożliwiają mocowanie różnych narzędzi do odpylacza, którego używam w swoim warsztacie. Film zawierał prosty opis problemu (wynikowe cięcie laserowe miało niewłaściwy rozmiar) i rozwiązanie (pole wyboru w oknie dialogowym opcji).

Na filmie głównie siedzę i rozmawiam przed laserem, a w całym tekście jest kilka zdjęć i zrzutów ekranu ilustrujących aspekty rozwiązania.

Ponieważ był to krótki film informacyjny, nie włożyłem wiele wysiłku w projekt produkcji - i to było widać. Co gorsza, coś poszło bardzo nie tak z dźwiękiem. Zacznijmy od tego.

AI nr 1: Używanie Adobe Podcast do usuwania okropnego dźwięku

Z jakiegoś powodu mój mikrofon nie nagrywał czystego dźwięku podczas czytania scenariusza. Nakręciłem ten film głównie po to, aby mieć odniesienie do tego, jak rozwiązałem problem, jeśli napotkam go ponownie, i aby podzielić się rozwiązaniem z innymi użytkownikami Glowforge.

Ale nie było warto wracać, ustawiać kamerę i podpowiedzi, a potem znowu odgrywać rolę gadającej głowy. Oto ośmiosekundowa próbka oryginalnego dźwięku:

Jak słychać, jest dość ostro. Próbowałem już wcześniej oczyścić inny dźwięk, ale rezultaty nigdy nie były szczególnie dobre.

Aby to zadziałało, zacząłem od oryginalnego wideo MP4 nagranego na moim iPadzie. Użyłem QuickTime do wyeksportowania ścieżki audio, pliku M4A. Niestety Adobe Podcast nie obsługuje M4A. Mam licencję Creative Cloud, więc wszedłem do Adobe Audition, otworzyłem M4A i zapisałem go z powrotem jako WAV. (Możesz także skorzystać z bezpłatnego programu Audacity o otwartym kodzie źródłowym, aby zrobić to samo.)

Następnie skierowałem przeglądarkę na Adobe Podcast, eksperymentalne narzędzie Adobe do ulepszania dźwięku AI. (To nie tylko dla podcasterów. Używam go do poprawiania dźwięku w filmie na YouTube). Ten bardzo przydatny mały zestaw narzędzi do komponowania i naprawy dźwięku jest dostępny dla każdego bezpłatnie. Po prostu zarejestruj się, podając swój adres e-mail.

Przewinąłem w dół do opcji Ulepsz mowę, nacisnąłem przycisk Wypróbuj i przesłałem moją ścieżkę dźwiękową.

Oto co wróciłem kilka minut później:

Wow, to poprawa! Jak noc i dzień, prawda? Wszystko, co musiałem zrobić w edytorze wideo, to porzucić oryginalną ścieżkę dźwiękową i wrzucić tę. Ogółem zajęło mi to może 10 minut, zamiast godzin frustracji, które mogłyby zapewnić mi wynik niezbyt dobry .

AI nr 2: Używanie Final Cut do oddzielenia wykonawcy od tła

Kiedy 23 maja wypuszczono Final Cut Pro 10.6.6, zawierało ono nowe narzędzie do maskowania oparte na sztucznej inteligencji - maskę do usuwania scen. To narzędzie zapewnia funkcjonalność zielonego ekranu bez konieczności korzystania z zielonego ekranu.

Oto jak to działa: Przechwytujesz sekundę lub dwie filmu tylko z tłem (bez obiektu w ramce). Następnie przechwytujesz normalny film. Jeśli zastosujesz maskę usuwania sceny do wideo, możesz usunąć tło zza głośnika. W tym momencie możesz umieścić wszystko za osobą na filmie.

Zacząłem od dwuminutowego filmu, który wyglądał tak:

Maska usuwania sceny pozwoliła mi usunąć tło. Gdy już zniknęło tło, mogłem też powiększyć, żeby lepiej wypełnić kadr:

Jednak nadal występowały problemy z tłem, które chciałem naprawić. W tym celu przejdźmy do nowych funkcji Wypełniania generatywnego programu Photoshop, a następnie powróćmy do Final Cut, aby zakończyć sprawę.

AI nr 3: Używanie wypełnienia generatywnego Adobe do czyszczenia tła

Oto, co kamera zobaczyła za miejscem, w którym siedziałem i gadałem:

Pierwszą rzeczą, którą chciałem zrobić, było usunięcie drukarki 3D, która blokowała róg Glowforge:

Zwróć uwagę na drukarkę na obrazku po lewej stronie. Narysowałem obszar zaznaczenia wokół drukarki i w wersji beta programu Photoshop kliknąłem Wypełnienie generatywne. Photoshop wiedział, że należy usunąć drukarkę 3D, narysować brakujący obszar ściany i - co mnie zaskoczyło - sztuczna inteligencja narysowała resztę Glowforge (w tym teksturę i linie), których pierwotnie brakowało na obrazie.

Zdecydowałem, że ściana jest trochę pusta, więc dlaczego nie skorzystać ze starej funkcji Photoshopa i dodać plakatu? Znalazłem zdjęcie świetnego plakatu Daleksa z Doktora Who, użyłem funkcji zniekształcania w Photoshopie bez sztucznej inteligencji z trybem mieszania i dodałem je w tle.

Za kilka minut wrócimy do wypełniania generującego sztuczną inteligencję, ale najpierw podsumujmy zmiany, które wprowadziliśmy do tej pory.

Komponowanie obrazu wideo

Wracając do Final Cut, przyniosłem nowy obraz tła, który zmodyfikowałem w Photoshopie. Są tu trzy warstwy ścieżek: złożony klip na dolnej warstwie, który integruje wcześniej naprawiony dźwięk, zmodyfikowany obraz tła i zamaskowaną wersję mojej gadającej głowy, przeskalowaną tak, aby pasowała do tła:

Ale ponieważ „zamaskowany” ja unosił się nad tłem, zdecydowałem, że mogę majstrować przy tle. Tak więc w moim otwierającym klipie zwiastuna zastosowałem standardowy efekt Comic Ink inny niż AI i umieściłem się na tle w stylu atramentu:

Następnie na końcu filmu zastąpiłem tło identyfikatorem kanału YouTube. Było to również bardzo łatwe, ponieważ miałem już zamaskowany klip mojej gadającej głowy.

W ten sposób wideo zostało ukończone. Ale wciąż miałem jeszcze jedno miejsce, w którym potrzebowałem pomocy AI.

Używanie Photoshop AI do przenoszenia mnie i naprawiania rolety okiennej

Kiedy tworzysz film w YouTube, miniatura filmu jest często równie ważna - niektórzy twierdzą, że nawet ważniejsza - jak sam film. Dzieje się tak dlatego, że to miniatura przyciąga uwagę widza i sprawia, że Twój film zostaje obejrzany.

Format miniatur mojego kanału zawiera słowa po lewej i na dole oraz obraz po prawej stronie. Ten obraz to zazwyczaj moje zdjęcie w kontekście tego, o czym jest film. Problem polegał na tym, że moja mówiąca głowa znajdowała się po lewej stronie ekranu.

Mogło to być łatwe rozwiązanie w Final Cut. Zamiast tego chciałem jednak skorzystać z nowej funkcji usuwania tła AI w Photoshopie. Zapisałem więc klatkę z mojego filmu i wciągnąłem ją do Photoshopa. Następnie użyłem nowego narzędzia do usuwania tła Photoshop AI, aby zamaskować tło i przesunąłem obraz w prawo:

Następnie umieściłem obraz tła - obraz, który wcześniej przygotowałem dla Final Cut - pod moim zamaskowanym obrazem - i dodałem styl marki do mojego kanału. Obejmowało to tekst o filmie, logo małego robota i żółty pasek w kształcie słońca na dole:

Niestety, szary obszar otworu wylotowego Glowforge (z mini Spockiem, Kirkiem i Misiem Lab) okazał się rozpraszający na miniaturze. Miniatury na YouTube są znacznie mniejsze niż na obrazku powyżej; przy tak małych rozmiarach po prostu nie wyglądał dobrze. Czerwona ramka na powyższym zdjęciu pokazuje obszar zainteresowania.

Tak naprawdę musiałem rozsunąć białe żaluzje w rozpraszającym obszarze. Niestety, sklonowanie rolet było znacznie trudniejsze, niż można było się spodziewać. Próbowałem użyć narzędzia Photoshop Clone Stamp, a nawet wyciąć, wkleić i zniekształcić część zasłon, ale nie wyszło dobrze.

Myślę, że dzieje się tak dlatego, że rolety nie są dokładnie równoległe na obrazie. Na żywo są równoległe, jednak zdjęcie zrobione jest pod kątem, przez co każdy niewidomy element ma nieco inny kształt, pod nieco innym kątem.

Wróciłem więc do funkcji Wypełnianie generatywne AI w Photoshopie. Wyłączyłem warstwy z tekstem i ze sobą, zaznaczyłem prostokąt wokół szarego obszaru i nacisnąłem Wypełnienie generatywne. Jak widać, nowo wygenerowane odcienie są niemal idealne:

A oto jak wygląda miniatura całego filmu, po usunięciu bałaganu, dodaniu nowego obszaru cienia i przesunięciu obrazu w prawo:

AI na ratunek

Jesteśmy przyzwyczajeni do efektownych efektów specjalnych podczas oglądania wysokobudżetowego hitu science-fiction lub programu telewizyjnego. Ale potężne efekty specjalne mogą przydać się nawet w najbardziej przyziemnych produkcjach.

Mój film ma tylko dwie minuty i 41 sekund. Pokazuje jedynie, jak zaznaczyć pole wyboru w programie Adobe Illustrator. A mimo to wykorzystuje całą gamę efektów specjalnych, zaprojektowanych tak, aby produkcja wyglądała i brzmiała lepiej.

Rzecz jednak w tym, że ponieważ jest to tak zwyczajny film, w żaden sposób nie mogłem uzasadnić, ile godzin zajęłoby maskowanie mojej poruszającej się głowy i tułowia klatka po klatce. Być może nie warto byłoby nawet próbować klonować i replikować części Glowforge zasłoniętej przez drukarkę 3D na obrazie tła. Naprawdę próbowałem wysunąć żaluzje za pomocą tradycyjnych narzędzi Photoshopa i poddałem się po około godzinie.

I choć bardzo się staram, po prostu nie mam umiejętności inżynierii dźwięku, aby oczyścić dźwięk, który tak bardzo zepsuł się podczas nagrywania. Ale przy pomocy sztucznej inteligencji udało mi się to naprawić na etapie postprodukcji.

Użycie każdego z narzędzi AI zajmowało od pięciu do 10 minut. Podsumowując, oto podsumowanie tego, jak korzystałem z narzędzi AI:

Adobe Podcast Enhance Speech: Aby oczyścić zniszczony dźwięk.
Maska do usuwania scen w Final Cut Pro: Aby usunąć tło, aby móc skalować i przesuwać gadającą głowę i tułów (co pozwoliło na trzy niestandardowe tła).
Wypełnienie generatywne w Photoshopie: Aby usunąć brzydką drukarkę 3D i rozszerzyć Glowforge na obrazie tła.
Usuwanie tła w programie Photoshop: Aby usunąć głowę i tułów z tła, aby móc przesunąć je w prawo i zapewnić miejsce na tekst.
Wypełnienie generatywne w Photoshopie: aby rozszerzyć odcienie w celu uporządkowania zaśmieconego obrazu.

Użyłem ich jako dodatku do zwykłego zestawu narzędzi, z których korzystałem od lat w Final Cut i Photoshopie. Ale wiedząc, jak trudne byłoby te pięć efektów wspomaganych sztuczną inteligencją bez sztucznej inteligencji, mogę powiedzieć, że prawdopodobnie bym ich nie zrobił… i prawdopodobnie nie opublikowałbym filmu.

Tak, martwię się, jak generatywna sztuczna inteligencja wpłynie na zatrudnienie (zwłaszcza gdy wiele prac pisarskich na niższym poziomie można zastąpić sztuczną inteligencją). Ale te pięć poprawek wygenerowanych przez sztuczną inteligencję pozwoliło mi zaoszczędzić ogromną ilość czasu, poradzić sobie z rzeczami, których sam nie miałem umiejętności zrobić, i stworzyło o wiele zabawniejsze i wciągające wideo - projekt wideo, który mogłem po prostu odrzucić ponieważ bez tych narzędzi AI nie mógłbym tego zrobić dobrze.

Oto jak to wszystko się złożyło:

Możesz śledzić moje codzienne aktualizacje projektu w mediach społecznościowych. Obserwuj mnie na Twitterze pod adresem @DavidGewirtz, na Facebooku pod adresem Facebook.com/DavidGewirtz, na Instagramie pod adresem Instagram.com/DavidGewirtz i na YouTube pod adresem YouTube.com/DavidGewirtzTV.