ChatGPT w DaVinci Resolve. Codex przejrzał mi 200 filmów i sam przygotował Timeline
Sztuczna inteligencja w programach do montażu nie jest niczym nowym. W DaVinci Resolve już od dawna wykorzystuję AI między innymi do transkrypcji i mówiąc szczerze radzi sobie z tym bardzo dobrze. Tym razem chodzi jednak o coś zupełnie innego.
Czy to wywróci pracę montażysty do góry nogami? Czy AI odbierze pracę montażystom? Spokojnie. Nie zastanawiam się nad tym obecnie. To tylko mój żart nawiązujący do początkowego czasu wchodzenia AI do powszechnego użycia, kiedy to wiele osób wieściło zastąpienie programistów przez sztuczną inteligencję. Proszę więc o podejście do tego z przymrużeniem oka. 😉
W DaVinci Resolve Studio 21 pojawiła się nowa możliwość. Możesz podłączyć zewnętrznego agenta AI, takiego jak Codex od OpenAI czy Claude od Anthropic, a następnie zwyczajnie wydawać mu polecenia.
Nie pytamy więc ChatGPT: „jak utworzyć Timeline w DaVinci Resolve?”. Możemy mu wydać polecenie: utwórz Timeline, przejrzyj te materiały, wybierz odpowiednie fragmenty i poukładaj je. A on naprawdę może wykonać te operacje w otwartym projekcie za nas.
Postanowiłem sprawdzić, jak wygląda to w praktyce. Nie na kilku testowych plikach, ale na prawdziwym projekcie zawierającym prawie 200 nagrań. Jak to wyszło? Zachęcam do sprawdzenia filmu na moim kanale YouTube:
ChatGPT przejrzał i posortował mi prawie 200 filmów
Do testu wykorzystałem materiały nagrane podczas wyjazdu nad morze. W projekcie znajdowało się 198 klipów, które wcześniej wrzuciłem do DaVinci Resolve.
Pierwsze zadanie dla Codexa było stosunkowo proste: przejrzeć materiały i pogrupować je tematycznie.
Agent potrzebował na to nieco ponad 9 minut.
W efekcie 198 klipów zostało podzielonych na 12 kategorii, między innymi:
- morze i panoramy wybrzeża,
- plaże i wydmy,
- fale, kamienie i umocnienia brzegu,
- strumienie i leśne wąwozy,
- porty, statki i żegluga,
- mewy i ptaki,
- latarnie morskie,
- architektura i miejsca,
- ludzie i wypoczynek,
- zachody słońca i pogoda.
Codex wybrał i przyciął materiały na stocki
I co najważniejsze, w tym czasie nie musiałem dotykać DaVinci Resolve.
Nie skończyłem na tym. Zachęcony efektem poprosiłem chataGPT w wersji Codex aby z jednego z przygotowanych folderów wybrał materiały na stocki, które według niego mogą nadawać się do sprzedaży na platformach stockowych.Tym razem pracował przez około 22 minuty.
Pierwszy test nie wyszedł idealnie. Dlaczego?
Efektem był gotowy Timeline zawierający wybrane fragmenty nagrań. Oprócz gotowych filmów, otrzymałem dodatkowe informacje dotyczące materiałów, na przykład o konieczności stabilizacji. Wszystko byłoby ok, gdyby nie to, że nieco źle opisałem to czego oczekiwałem. W efekcie agent przygotował mi wszystko ale nie do końca tak jak tego chciałem. Głównie chodzi o timeline przygotowany w 50FPSach.
Postanowiłem spróbować ponownie, tym razem odpowiednio przygotowując prompt.
Prompt:
Przeanalizuj wszystkie znajdujące się w folderze „02 Plaże i wydmy” w otwartym oknie DaVinci Resolve. Wybierz fragmenty, które Twoim zdaniem nadają się do sprzedaży jako stock video. Utwórz dla nich nowy Timeline o nazwie: „STOCK 02 – Plaże i wydmy”.
Timeline ustaw na: 3840 × 2160 px, 25 FPS
Zasady wyboru fragmentów:
- wybieraj ujęcia mające potencjał stockowy i możliwie uniwersalne zastosowanie,
- unikaj bardzo podobnych lub powtarzających się fragmentów, w przypadku dwóch podobnych ujęć wybierz to, które Twoim zdaniem jest lepsze,
- każdy wybrany fragment powinien mieć minimum 10 sekund,
- jeżeli w jednym nagraniu znajdują się dwa lub więcej wyraźnie różnych, wartościowych fragmentów, możesz wykorzystać je jako oddzielne klipy,
- odrzuć fragmenty nieostre, przypadkowe, z gwałtownym ruchem kamery albo ewidentnie nieudane,
- nie wykonuj żadnego slow motion, spowolnienia wybranych ujęć zrobię później sam.
Obraz:
- jeżeli horyzont jest wyraźnie krzywy, delikatnie go wypoziomuj,
- jeżeli ujęcie wymaga stabilizacji, zastosuj stabilizację, ale tylko wtedy, kiedy poprawia obraz i nie powoduje nadmiernego cropu ani widocznych artefaktów,
- nie wykonuj żadnych dodatkowych zmian jak np. korekcja kolorystyczna.
Dźwięk:
Materiały przygotowywane są jako stock video i nie potrzebuję dźwięku. Na Timeline umieść wybrane fragmenty bez audio / usuń odpowiadające im ścieżki dźwiękowe.
Nie zmieniaj plików źródłowych ani innych binów i timeline’ów w projekcie.
Po wykonaniu zadania podaj:
- ile nagrań przeanalizowałeś,
- ile nagrań wykorzystałeś,
- ile fragmentów znalazło się na Timeline,
- które ujęcia zostały ustabilizowane,
- które ujęcia wymagały korekty poziomu,
- które nagrania zostały odrzucone i z jakiego powodu.
Jak połączyć ChatGPT z DaVinci Resolve?
Aktualnie DaVinci Resolve współpracuje z dwoma agentami: Codex (ChatGPT) od OpenAi oraz Claude. Aby mógł to robić na komputerze musisz mieć zainstalowane desktopowe wersje aplikacji. Możesz je pobrać poniżej:
DaVinci Resolve pobierzesz również bezpłatnie ze strony Blackamagic, jednak agenci AI nie działają w wersji bezpłatnej.
Samo połączenie DaVinci z ChatemGPT lub Claude jest bardzo proste. Po zainstalowaniu agentów na komputerze w DaVinci Resolve przechodzimy kolejno przez: File -> Setup AI Assistants i wybrać odpowiedniego dla siebie agenta. Ja połączyłem DaVinci z ChatemGPT
Łyżka dziegciu w beczce miodu. Czyli czy to się opłaca?
Wszystko byłoby super, gdyby nie koszt takiej zabawy. Taka praca potrafi bardzo szybko zużywać dostępny limit.
Nie da się przy tym powiedzieć, że jedno polecenie zabiera zawsze określony procent. Wszystko zależy między innymi od złożoności zadania, ilości kontekstu, rozumowania oraz używanych narzędzi. Długie i złożone zadanie może więc zużywać znacznie więcej zasobów niż krótkie polecenie. Mogłem się o tym przekonać obserwując zużycie podczas sortowania filmów a później podczas ich obróbki. Pokazuję to na załączonym do materiału filmie.
Na dziś AI potrafi już zrobić naprawdę sporo i jestem bardzo ciekaw, jak będzie to wyglądało za rok czy dwa. Zastanawiam się tylko, czy przy takim zużyciu limitu będzie to miało sens dla kogoś, kto montuje filmy po prostu hobbystycznie.
AI wykorzystuje dziś wiele aplikacji. Czy wiesz, że możesz z niego korzystać np. słuchająć muzyki na Spotify?
https://evir.pl/spotify-dj-ai-jak-wlaczyc-i-jak-dziala-nowa-funkcja-poradnik/
