AI와 클라우드가 영화와 TV 제작의 경계를 허무는 방법

오늘날 인공 지능과 클라우드 컴퓨팅에 대한 대화가 희귀한 기술 및 투자자 서클뿐만 아니라 모든 곳에서 이루어지는 것처럼 보인다면 그것은 사실입니다. 그리고 엔터테인먼트 비즈니스에서보다 더 사실적인 곳은 없습니다. 크리에이티브 클래스와 비즈니스 클래스 모두가 수년 동안 연마한 기술에 어떤 영향을 미칠 수 있는지에 대해 우려하고 기술의 민주화 능력에 열광합니다.

최근 선댄스 영화제에서 저는 영화 및 TV 제작 프로세스를 혁신하는 새로운 AI 및 클라우드 투 카메라 기능을 사용하는 수많은 감독, 편집자 및 기타 사람들과 널리 사용되는 편집 소프트웨어인 Premiere Pro 및 창의성을 가능하게 하는 다른 도구.

지금은 긍정적인 면과 부정적인 면 모두에서 숨이 멎을 듯한 예측이 나오는 놀라운 시대이고 빠르게 진화하고 있지만 또한 영화와 TV(그냥 비디오 기반이라고 합시다)가 XNUMX년 이상 제작된 방식을 다시 만들 수 있는 좋은 기회이기도 합니다.

업계의 포용은 이제 막 시작되었습니다. 컴캐스트CMCSA
, 예를 들어 방금 받은 스포츠 비디오 하이라이트를 빠르게 생성하기 위해 AI를 사용한 기술 에미상.

AI 기술이 산업의 전문 분야에서도 등장함에 따라 스타들과 그들의 대표들도 주목하고 있습니다.

예를 들어 연예기획사 CAA는 Metaphysic과 전략적 파트너십을 체결했으며, "디에이징" 도구를 제공하고 있습니다. 여기 그래픽 소설을 기반으로 한 Miramax 기능. 배우 톰 행크스와 로빈 라이트가 오랜 청춘 시절부터 나이를 먹어가는 한 방에서 캐릭터를 연기한다.

대행사의 경우 이러한 기술의 매력은 분명합니다. 가장 큰 스타/고객은 갑자기 더 많은 역할을 수십 년 동안 더 오래 실행할 수 있습니다.

새로운 기술의 보강 가능성

그러나 날마다 비디오 기반 프로젝트를 만드는 복잡한 작업에 관련된 편집자, 감독 및 기타 사람들을 위한 가능성이 높아지고 있습니다. 인디 및 다큐멘터리 프로젝트가 Sundance 일정을 채우는 신예 작가들과의 대화에서 그들은 Premiere Pro를 점점 더 많은 창작자들이 점점 더 다양한 창의적 용도를 가능하게 하는 고속 협업 플랫폼으로 보고 있음이 분명합니다.

어도비ADBE
프로 비디오의 제품 마케팅 이사인 Meagan Keane은 AI를 “영화 제작의 미래를 생각할 때 가능성을 여는 거대한 문입니다. 우리는 미래가 모두를 위한 것이라고 생각합니다.”

그녀는 AI가 어떻게 인간의 창의성을 대체하는 것이 아니라 증가시킬 수 있는지를 의미합니다. AI 기반 도구는 기술 능력, 리소스 또는 비디오 및 기타 미디어의 매력적인 패션 프로젝트에 대한 연결이 없거나 전혀 없는 크리에이터에게 권한을 부여할 수 있습니다. 지금도 전문 크리에이터의 경우 AI는 특정 장면의 영상을 살펴보는 것과 같은 반복적인 작업을 줄여 편집자와 다른 크리에이터가 (문자 그대로) 더 큰 그림에 집중할 수 있도록 합니다.

그러나 Adobe의 글로벌 혁신 수석 이사이자 Adobe가 소유한 Frame.io에서 카메라-클라우드 기술의 오랜 챔피언인 Michael Cioni는 그보다 더 크다고 말했습니다.

모든 디지털 자산도 클라우드 자산

“2031년까지 미디어와 엔터테인먼트에서 생성되는 모든 전자 자산은 클라우드에서 클라우드에 의해 생성될 것입니다. 그게 진실이야. 저는 이를 기술적인 확실성이라고 부릅니다. 기기에서 생성되는 모든 전자 자산은 로컬 하드 드라이브, 셀룰로이드, 비디오테이프 또는 메모리 카드가 아니라 클라우드에서 생성될 것입니다.

친숙한 미디어 변환 주기에서 텍스트 문서는 가장 먼저 클라우드(및 AI)로 향했습니다. 이제 Google Docs, Apple Pages, Microsoft Word 및 Adobe의 Acrobat과 같은 클라우드 기반 서비스에서 일상적으로 생성, 공유 및 재구성됩니다. Spotify, Apple Music, Amazon Music, Tidal 등 덕분에 수억 명의 사람들이 클라우드에서 음악을 듣고(그리고 만들고, 공동 작업하고, 판매합니다). 이제 우리가 만드는 가장 복잡한 미디어를 변화시키고 있습니다.

“영화 장면을 찍고 있다고 가정해 봅시다.” Cioni가 말했습니다. “장면을 촬영한 후 실제로 언어를 입력할 수 있습니다. '비가 내리게 해주세요.' 그리고 샷에 물이 나타나고 비가 내리기 시작합니다. 'Make it snow'라고 하면 장면에 나타나기 시작합니다. 그리고 그렇게 하기 위해 엔지니어가 될 필요는 없습니다. 그것은 정말 공상 과학 소설처럼 보이지만 완전히 가능해질 것입니다. 스틸 사진(사진)의 초기 단계에서 이러한 현상이 발생하는 것을 보고 있으며 비디오로 캐스케이드될 것임을 알고 있습니다. 이것이 창의적인 사람들에게 어떤 영향을 미치는지 생각해야 하는 정말 중요한 속성입니다.”

그것은 움직이는 이미지를 만드는 미래에 많은 영향을 미칩니다. 30대에 시인에서 소설가, 싱어송라이터로 전향하면서 레너드 코헨(Leonard Cohen)이 오래 전에 말했듯이 “많은 노력 사이의 경계가 희미해졌다.”

많은 젊은 영화 제작자들이 일상적으로 이러한 경계를 넘어 프로젝트를 만들고 일상적으로 디지털 플랫폼에서 공동 작업을 합니다. 클라우드-카메라 전달 및 AI 스마트를 통해 장면을 촬영하고 편집을 위한 시작 위치로 대략적인 "조립"을 신속하게 생성하는 동시에 장면이 "작동"하기에 충분한지 또는 더 많은 촬영이 필요한지 결정할 수 있습니다. .

또한 미세 조정을 위해 전문가에게 넘기기 전에 기본 시각 효과, 색상 보정, 심지어 사운드 디자인까지 거칠게 할 수 있습니다. 이와 같이 Premiere는 많은 Sundance 제작자에게 기존의 비선형 비디오 편집 프로그램 그 이상이 되었습니다.

인간과 이미지의 새로운 관계 구축

도발적인 다큐멘터리의 공동 감독이자 공동 편집자인 Maximilien Van Aertryck은 "이것은 우리의 가장 큰 열정 중 하나입니다. 인간과 카메라의 관계, 그리고 그것이 사회에 미치는 영향입니다."라고 말했습니다. 환상적인 기계, 그 크리에이티브 비전 부문 선댄스 특별 심사위원상 수상. "우리는 재미를 좋아하는 인류학자와 같습니다."

그들의 다큐멘터리는 우리가 이 새로운 도구로 만들고 있는 세계에 대한 신중한 접근 방식을 부드럽게 요구합니다. 오래된 정치적 농담처럼 "누구를 믿겠습니까: 나 아니면 당신의 거짓말하는 눈?" 점점 더 우리의 눈이 언제인지 이해해야 합니다. are Aertryck의 공동 감독 겸 편집자인 Axel Danielson은 거짓말과 움직이는 이미지를 믿어야 한다고 말했습니다.

"영화에는 답이 많지 않습니다." Danielson이 말했습니다. “질문이 있습니다. 우리가 아는 유일한 대답은 사회 전체가 미디어 리터러시를 매우 심각하게 받아들여야 한다는 것입니다.”

이 프로젝트는 Georges Melies(그의 왕실 주제가 영화의 이름이 된 것을 외쳤습니다)와 같은 선구자들로 거슬러 올라가 XNUMX년이 넘는 동영상 이미지를 수집합니다. 그 과정에서 뉘른베르크에서 열린 나치 집회에서 그녀가 가장 좋아하는 장면을 플레이 바이 플레이하는 불안할 정도로 열렬한 Leni Riefenstahl과 테러리스트 모집 비디오에서 blooper 릴로 자신의 라인을 반복적으로 망치는 ISIS 전투기에서 멈 춥니 다. 훨씬 더 부드러운 부분도 있지만 요점은 위대하고 끔찍한 제작자가 다양한 방법으로 새로운 도구를 활용하게 될 것이라는 점입니다.

On 환상적인 기계, Van Aertryck과 Danielson은 인간/카메라와 그들이 만드는 이미지 사이의 복잡한 관계에 대한 독특한 클립을 수집하는 데 몇 년을 보냈습니다. 영화를 조립할 시간이 되자 그들은 편집자 Mikel Cee Karlsson 및 총괄 프로듀서인 Ruben Ostlund와 함께 원격으로 작업했습니다.슬픔의 삼각형) 그의 플랫폼 프로덕션이 영화를 제작했습니다.

“우리는 훈련받은 편집자가 아닙니다. 우리는 그렇게 해야 하기 때문에 그렇게 합니다.”라고 Van Aertryck은 말했습니다. "Adobe는 우리에게 완벽한 도구입니다. 거기에 모든 것을 넣고 앞뒤로 공유할 수 있기 때문입니다."

발트해 연안(스웨덴 예테보리)에서 발레아레스 제도(마요르카)에 이르기까지 서유럽 전역에 흩어져 있었지만 XNUMX명은 Premiere의 클라우드 기반 도구를 사용하여 테이블 주위에 앉아 있는 것처럼 클립과 시퀀스를 교환했다고 Van Aertryck은 말했습니다. 이것은 제작자가 필요하거나 원할 때 어디에서나 와서 작업할 수 있는 자유를 보여주는 특히 광범위한 예입니다.

"온라인으로 공유할 수 있다는 것은 훨씬 더 많은 것을 가능하게 합니다."라고 말했습니다. Crystal Kayiza, 작가 겸 감독 휴식 중지, 미국 단편 영화 소설로 선댄스 심사위 원상을 수상했습니다. "오클라호마로 돌아가고 싶다면, 내가 쇼트를 만들고 있다면 그렇게 할 수 있습니다."

작년에 Adobe는 일부 인기 있는 카메라 및 기타 제작 장치에서 비디오를 캡처하는 동시에 전송하는 새로운 Direct-to-Cloud 기능을 발표했습니다. 이를 통해 편집자, 프로듀서, 경영진 및 기타 포스트 프로덕션 전문가는 촬영 후 몇 분 만에 영상 작업을 시작할 수 있습니다.

소규모 프로덕션에서도 이 기술을 사용하고 있습니다. 특히 초기에는 클라우드 연결이 필수적이었습니다. 마리아치에서 대표팀 가기, 선댄스 편집상을 수상한 Daniela T. Quiroz가 말했습니다.

감독 Alejandra Vasquez와 Sam Osborn은 브루클린에 기반을 둔 Quiroz가 프로젝트를 시작했을 때 텍사스의 Rio Grande Valley에서 고등학교 댄스 대회에 관한 다큐멘터리를 촬영하고 있었습니다. 이미 캡처된 자료에 대한 그녀의 초기의 신선한 시각은 후속 촬영 및 초점 영역을 형성하는 데 도움이 되었습니다.

Quiroz는 “편집자로서 우리는 이 사람들을 처음으로 카메라에서 볼 수 있는 특별한 특권을 가지고 있습니다. "당신이 누구와 사랑에 빠지고 있는지, 어떤 음악에 빠져 있는지 정말 알게 됩니다."

몇 년 전의 '옛날'처럼 당장 접할 수 있는 디지털 일간지 없이 지내는 것이 촬영의 필수품이었다. 가끔 나는 죽는 것에 대해 생각한다 오레곤 해안의 외딴 곳에 위치합니다. 대신, 매일의 영상을 하드 드라이브에 로드한 다음 밤새 뉴올리언스로 배송하여 디지털 중개업체에 수집했습니다. 편집자 Ryan Kendrick은 기술이 가져온 개선 사항을 상기시켜주었습니다.

새로운 종류의 협업

이를 통해 내슈빌에 기반을 둔 Kendrick은 편집을 시작하고 Rachel Lambert 감독 및 여러 주에 있는 다른 사람들과 협력할 수 있었습니다.

Kendrick은 "내가 함께 일하고 싶은 사람과 함께 일할 수 있고 우리가 같은 장소에 얽매이지 않는다는 것이 얼마나 멋진 일인가"라고 말했습니다. 또한 감독, 촬영 감독, 편집자 및 나머지 프로덕션 간의 역동성을 변경합니다.

Kendrick은 과거에 "항상 세트장에서 고립된 느낌을 받았습니다."라고 말했습니다. “이제 당신은 그것에 더 연결되어 있다고 느낍니다. 당신은 그들이 만드는 톤에서 그렇게 분리된 느낌이 들지 않습니다. 편집실은 실수를 많이 하고 하고 싶은 것과는 정반대의 일을 하기 정말 좋은 곳입니다. 저는 항상 '모르겠어요. 알아내자.'”

On 가끔은 죽을 것 같은 기분이 들어, Kendrick, Lambert 및 사진 감독 Dustin Lane은 잠재적인 문제를 조기에 차단하기 위해 실제로 촬영이 시작되기 오래 전부터 매주 대화를 시작했습니다.

Kendrick은 "우리는 발생할 수 있는 편집 문제에 대해 이야기할 것입니다."라고 말했습니다. “대본을 받았을 때 생각하기 가장 어려운 것은 영화가 다음 부분으로 어떻게 전환될 것인지입니다. 구체적으로 영화에서는 (주인공들이) 영화를 보러 간다. 우리는 감정의 무게를 유지하는 데 필요한 이미지를 어떻게 얻을 것인지에 대해 많은 이야기를 나눴습니다.”

Camera-to-Cloud로 가능한 빠른 전환은 광고 및 뮤직 비디오와 같은 짧은 프로젝트에 특히 유용하다고 Kendrick은 말했습니다.

Kendrick은 "광고의 전환점 중 일부는 거칠다"고 말했습니다. Premiere Pro, Frame.io 및 After Effects에서 프로젝트를 주고받을 수 있는 기능은 클라우드 기반 아키텍처를 통해서만 가능했습니다.

Kendrick은 “지난 XNUMX년 동안 제거된 것 중 가장 큰 것(생산 워크플로의 지연)입니다.”라고 말했습니다.

더 나은 기술 구축의 기본 원칙

Adobe의 기술에 대한 접근 방식은 워크플로, 미디어, 공동 작업, 생산성 및 보안이라는 XNUMX가지 "지침 원칙"을 기반으로 구축되었다고 Keane은 말했습니다.

Keane은 "우리는 AI를 '생산성'에 담았습니다."라고 말했습니다. “크리에이티브를 교체하는 것이 아닙니다. 평범한 것을 대체하는 것입니다.”

할리우드의 노동조합은 급변하는 AI 공간을 예의주시하고 있다. Puck은 할리우드 최대 노조인 SAG-AFTRA 이사회가 다가오는 계약 협상에서 AI를 사용하여 구성원의 외모, 목소리 또는 기타 측면을 재현하는 초상권 문제를 포함시킬 계획이라고 보고했습니다.

현재 탤런트 변호사는 "배우의 연기를 시뮬레이션할 수 있는 권리를 통제한다고 주장하는 계약의 모든 언어는 '조합과 조건이 협상될 때까지 무효이며 시행할 수 없다'"고 조언했습니다. Puck은 보고했습니다. .

복잡한 새로운 문제는 이번 봄에 일부 강력한 계약 협상을 만들 수 있습니다. 경력 기회를 확장하려는 젊은 및 중년 연기자들은 기술의 일부 사용을 수용할 수 있지만 강력한 계약 보호 없이 일부 매장은 기술적으로 배우가 아닌 디지털 공연에 대한 비용 지불을 피하는 방법으로 기술을 사용할 수 있습니다.

결국 일어날 수 있는 일에 대한 조잡한 예는 몇 주 동안 Twitch에서 찾을 수 있습니다. "watchmeforever"는 끝없는 AI 생성 "에피소드" Seinfeld. "쇼"는 어조가 좋지 않은 컴퓨터 생성 음성, 단순한 그래픽 및 특별히 웃기지 않은 농담을 특징으로 합니다. 쇼는 또한 훨씬 더 높은 품질 수준에서 궁극적으로 가능한 것을 제안합니다. "Jerry" 캐릭터의 스탠드업 루틴이 반트랜스 루틴으로 간주되는 것으로 바뀌었을 때 종료 알림과 함께 무한 루프가 중단되었다는 점은 주목할 가치가 있습니다.

창의적인 추구를 위해 세상을 열다

훨씬 더 긍정적인 점에서 Adobe의 Keane은 AI와 클라우드가 제공할 창의적인 도구에 대한 훨씬 더 광범위한 액세스를 지적합니다. 프로세스 이미지와 사운드를 생성하고 효과와 나머지를 생성하는 대규모 렌더 팜이 필요하지 않으면서도 어느 정도 야심찬 비디오 프로젝트에 필요한 컴퓨팅 성능과 보안을 제공합니다.

"클라우드를 중앙 집중화할 수 있다면 전 세계에서 오는 이야기를 가질 가능성을 열 수 있습니다."라고 Keane은 말했습니다. “협업은 모든 단계에서 이루어져야 합니다. 공유된 관점은 당신의 아이디어를 강화하거나 당신을 더욱 도전하게 합니다.”

영화 제작자를 위한 보안의 중요성에 대한 예로 Keane은 다음과 같이 지적했습니다. 계획 C, 낙태에 관한 선댄스 다큐멘터리. 제작자는 일부 카메라 인터뷰의 얼굴과 목소리를 여러 번 흐리게 처리해야 했으며 흐리게 처리되지 않은 원본 미디어에 대해서도 철저한 보안이 필요했습니다.

생성 AI, 딥 페이크 및 관련 문제의 폭발적인 증가는 진정성이 그 어느 때보다 중요하다는 것을 의미한다고 Keane은 말했습니다. Adobe는 New York Times와 같은 다른 미디어 및 기술 회사와 함께 Content Authenticity Initiative의 회원입니다.NYT
그리고 캐논.

상징적인 공상과학 프랜차이즈의 스타, 키아누 리브스 매트릭스, 덜 낙관적입니다. 그는 최근 Wired에 AI 지원 비디오를 악의적으로 사용하여 딥페이크는 "무섭다". Reeves의 계약에는 일상적으로 스튜디오가 그의 공연을 디지털 방식으로 조작하는 것을 금지하는 조항이 포함되어 있습니다. 이 조항은 그의 얼굴에 가상의 눈물을 삽입한 프로덕션부터 수십 년 전으로 거슬러 올라갑니다.

Reeves는 침습적 관행에 대해 "그것에 대해 실망스러운 것은 선택 의지를 잃는다는 것입니다."라고 말했습니다. “영화에서 연기를 하면 편집될 거라는 걸 알지만 거기에 참여하는 거예요. 딥페이크 땅에 들어가면 당신의 관점이 없습니다. 그것은 무섭다. 인간이 이러한 기술을 어떻게 다루는지 보는 것은 흥미로울 것입니다.”

차세대 판도를 바꾸는 기술

Premiere Pro에서 이미 베타 버전으로 제공되는 차세대 엣지 푸싱 기술은 소위 텍스트 기반 편집으로, AI가 비디오에서 추출하고 기록한 대화 텍스트를 편집하여 비디오를 편집할 수 있습니다. 또한 AI는 중요한 사운드 바이트를 강조 표시하고, 최종 프로젝트의 초기 어셈블리를 구축하고, 키워드 기반 검색을 생성하여 특정 클립이나 대화를 빠르게 찾을 수 있습니다. 프로젝트를 위해 구축된 데이터는 모든 장면을 효율적으로 관리하는 강력하고 새로운 방법이 됩니다.

"당신은 이 모든 풍부한 데이터로 미디어를 수분 공급하고 있습니다."라고 Keane은 말했습니다.

일부 소규모 회사는 이미 유사한 기술을 도입하기 시작했습니다. 설명 및 팟캐스트 음성의 디지털 버전을 만든 다음 추가 편집 없이 텍스트 기반 스크립트를 읽도록 할 수 있습니다. 또한 Descript는 최근에 팟캐스트든 다른 콘텐츠든 상관없이 비디오용 텍스트 기반 편집을 추가했습니다.

편집자 Kendrick은 이미 Adobe의 텍스트 기반 편집 도구를 사용하여 친구가 알래스카에 기반을 둔 미니 다큐멘터리를 빠르게 전환할 수 있도록 돕고 있다고 말했습니다. Kendrick은 텍스트 기반 편집은 일반적으로 빡빡한 타임라인에서 대본 없는 쇼를 신속하게 조합하기 위해 며칠 분량의 영상을 거쳐야 하는 소위 "프레디터", 즉 일반적으로 제작자/편집자에게 매우 유용할 것이라고 말했습니다.

오디오북, 대본, 소셜 미디어에도 AI 도입

AI는 엔터테인먼트의 다른 많은 분야에도 진출하고 있습니다. 사과AAPL
시작 오디오북용 내레이션을 생성하도록 설계된 AI 도구 모음, 저자가 "인간 내레이터를 기반으로 디지털 음성으로 설명하는" 프로젝트의 저비용 오디오 버전을 만들 수 있는 또 다른 옵션을 만듭니다. 이 소식은 엘리트 인간 오디오북 내레이터 군단과 그들의 많은 팬들로부터 큰 반대를 불러일으켰습니다.

인간 내레이터의 최고의 작품을 소중히 여겨야 할 이유가 분명히 있으며 AI 도구가 최고의 책에서 최고의 인간 독자의 매력적인 목소리와 공연에 가까워지기까지는 오랜 시간이 걸릴 수 있습니다.

그러나 그 재능을 사용하는 데 드는 비용은 매년 발행되는 수만 권의 책 재정을 훨씬 뛰어넘습니다. 그곳에서 Apple의 도구 세트는 이미 전 세계적으로 약 1.5억 달러에 달하는 가치가 있는 이전의 원격 시장에 도달하려는 소규모 도서, 작가 및 출판사를 위한 또 다른 시장에 대한 액세스를 제공할 수 있습니다.

시작 영화상 AI를 사용하여 출연진, 소품, 의상, 사용된 차량, 사운드, 위치 등과 같은 요소를 포함한 스크립트 구성 요소를 분석합니다.

비즈니스의 짧고 짧은 비디오 측면에서 TikTok, Meta's Reels 및 Alphabet의 YouTube Shorts는 모두 기계 학습 및 AI 도구에 의존하여 사용자가 보고 싶어할 다음 "추천" 비디오를 제공합니다. 보다 원활하고 매력적인 방식으로 해당 경험에 광고를 연결합니다.

LightShed Partners의 분석가 Rich Greenberg가 전화했습니다. 향상된 AI 기반 콘텐츠 추천으로의 Facebook 전환은 매우 비쌉니다., 그러나 "궁극적으로 (Meta CEO Mark) Zuckerberg가 처음부터 지속적으로 진화해 온 플랫폼에서 (모바일 다음으로) 두 번째로 인상적인 피벗임을 증명할 수 있습니다."

출처: https://www.forbes.com/sites/dbloom/2023/02/24/how-ai-and-the-cloud-are-erasing-the-borders-in-making-movies-and-tv- 쇼/