[SXSW 2025] AI가 바꾸는 미디어 산업 "당신의 반응이 결론을 바꿀 수도 있다"(AI and Media, Your Reaction May Change the Conclusion)

Jung Han -

  • 제목: Featured Session: Paramount CTO on AI in the Media Industry
  • 일시: 2025년 3월 11일(화), 오전 11시 30분 ~ 오후 12시 30분 (CT)
  • 장소: 오스틴 컨벤션 센터(Austin Convention Center) Ballroom EF
  • 트랙: Innovation AI

"미디어 엔터테인먼트 분야에서 AI는 3중의 저주(복잡성, 실험적 성격, 예상치 못한 결과)에서 3중의 혁신(비용절감, 애자일 제작 문화 확산, 시청자 경험 향상)으로 전환되고 있다"

인공지능(AI)은 미디어 산업의 지형을 바꾸고 있는 가운데 소프트웨어 산업에서 폭넓게 적용된 애자일(agile) 문문화가 미디어 산업에서도 일반화될 것이라는 전망이 나왔다.

빠른 피드백과 지속적인 개선을 통해 프로젝트의 적응성과 품질을 높이는 애자일 문화가 영상 제작 프로세스에서도 프리비즈(Pre-visualization, 사전 시각화), 가상 스튜디오 등 AI기술로 최종 결과물을 우선적으로 뽑아내고 즉시 피드백을 통해 연출 방향을 빠르게 수정할 수 있는 환경이 마련되고 있다는 것이다.

애자일 문화가 미디어 산업에 확산되면 시간·비용 효율을 높이고 창작자의 아이디어를 보다 빠르게 현실화할 수 있다.

그러나 AI가 모든 영상을 만들 수 있는 시대, 영상 제작의 기본기에 대한 습득은 필수라는 지적이다.  영상 문법을 숙지하지 못한 상황에서 AI만을 사용한다면  '품질이 낮은 저가 영상'을 만드는데 그칠 것이라는 이야기다.


"AI is shifting from the triple curse (complexity, experimental nature, unexpected results) to the triple revolution (lowering costs, spreading agile production culture, and enhancing the audience experience)"
In the media industry, AI is causing the media industry to face "complexity ,
. AI in media faces a triple curse: complexity, experimental nature, and limited conversation, leading to fear and uncertainty.
AI is changing the landscape of the media industry, and the agile culture that has been widely adopted in the software industry is expected to become commonplace in the media industry.
The agile culture, which improves the adaptability and quality of projects through quick feedback and continuous improvement, is also being applied to the video production process, where AI technologies such as pre-visualization and virtual studios are being used to prioritize the final result and quickly modify the direction of the production through immediate feedback.
As the agile culture spreads across the media industry, it can be more time- and cost-efficient and bring creators' ideas to life faster.
However, in an era where AI can create all videos, it is essential to learn the basics of video production.  If you don't understand video grammar, you'll end up with "low-quality, low-cost videos" if you use only AI.

필 와이저(Phil Wiser)
  • 주제: AI가 미디어 산업 전반, 특히 영상 제작과 시청 경험을 어떻게 혁신하는가
  • 핵심 포인트:
  1. 애자일 영상 제작 → 실시간 수정·피드백
  2. 시청자 데이터 활용 → 맞춤형 스토리·개인화 추천
  3. 마케팅·스크립트·이미징 자동화 → 비용 절감 & 창작 효율 극대화
  • 미래 이슈: 윤리·저작권 문제, 양자 컴퓨팅의 잠재력, 새 크리에이티브 직무 등장

파라마운트 CTO 필 와이저(Phil Wiser)는 AI in the Media Industry 강연에서 AI가 미디어 산업에 어떤 식으로 스며들고 변화를 이끌고 있는지에 대한 다양한 사례를 소개했다. 그는 "AI를 활용한 마케팅·영상 콘텐츠 대량 제작, 스크립트·이미지 자동화 등의 전략"을 소개하며, “빠른 시일 내 AI가 더 풍부한 콘텐츠 생태계를 조성해낼 것”이라고 전망했다.

“AI 기술, 미디어 산업에 어떻게 스며들고 있는가?”

필 와이저(Phil Wiser)의 SXSW 2025 강연은 미디어 업계 전반에 걸쳐 ‘AI가 실현하고 있는 변화’와 ‘향후 5년 간의 기회와 도전’이라는 주제에 집중됐다.

그는 세션에서 파라마운트가 실제 AI 기술을 어떻게 적용해 콘텐츠 제작 효율을 높이고, 시청 경험을 개선하고 있는지 세 가지 대표 사례를 중심으로 소개했다. 또 AI를 활용한 마케팅 확장, 대규모 영상 콘텐츠 제작, 스크립트 및 이미지 생성 등 구체적 활용 방안들을 공유하며, 미래 영상 제작의 청사진을 제시했다.

1. 소프트웨어의 ‘애자일(Agile) 문화’를 영상 제작으로

필 와이저는 “과거 소프트웨어 개발 방식인 ‘워터폴(Waterfall)’이 어떻게 ‘지속적 통합(Continuous Integration)·지속적 배포(Continuous Delivery)’ 방식으로 전환되었는지”를 회고하며, 이 같은 패러다임 변화가 영상 제작에서도 본격화되고 있다고 강조했다.

워터폴(Waterfall)에서 애자일로


과거 IT산업은 긴 기획 단계 → 빌드(개발) → 알파·베타 테스트 → 출시 순의 선형 프로세스가 주류였다. 그러나 오늘날 소프트웨어 업계는 짧은 주기로 제품을 지속 개선하며 실시간 피드백을 반영하는 애자일 문화를 폭넓게 도입했다.

애자일 영상 제작
영상 분야에서도 애자일 문화가 적용될 수 있다. AI가 제작의 속도를 상당히 높여줄 수 있기 때문이다. 특히 현장 촬영의 필요성을 상당히 줄여줘 프리비즈(Pre-visualization), 가상 스튜디오 등의 기술로 최종 결과물을 일찍 시각화하고, 즉시 피드백을 통해 연출 방향을 빠르게 수정할 수 있는 환경이 마련되고 있다. 이는 기존 대비 시간과 비용을 절감할 뿐 아니라, 새로운 창작 아이디어를 현장에서 즉각 반영할 수 있어 콘텐츠 품질을 높이는 데 기여한다고 와이저는 지적했다.

2. 시청 경험 혁신: “당신의 반응이 스토리를 바꿀 수도 있다”

필 와이저는 AI시대, 시청자 데이터 분석을 통해 실시간으로 콘텐츠를 조정하고, 맞춤형 추천을 제공하는 기술이 더욱 정교해질 것이라고 내다봤다.

  • 즉시 반응 기반 스토리 변화
    온라인 플랫폼에서 크리에이터들은 이미 좋아요 수, 댓글, 이탈률 등의 데이터를 실시간으로 확인하며 다음 에피소드의 전개 방향을 유연하게 바꾼다.
  • 장르 확장
    이 같은 접근 방식이 향후 드라마·영화 등 장기 프로젝트에도 적용된다면, 제작 중인 영상물이 소비자 반응에 따라 스토리 라인을 조정하는 시대가 열릴 수 있다.
  • AI 추천 엔진 고도화
    프리이엄 콘텐츠 제작 환경에서도 AI가 즉시 반영 스토리를 만들어낼 수 있다. 대형 미디어 기업들은 시청자 취향에 최적화된 콘텐츠를 빠르게 추천하거나, 개인 맞춤형 광고·마케팅을 구현하기 위해 AI 기반 솔루션을 공격적으로 도입하고 있다.

SXSW2025에서 한국 콘텐츠진흥원(KOCCA)가 만든 K파블리온에 부스를 만든 '기어이 스튜디오(Giöii Immersive Studio)'는 AI와 테크놀로지를 이용, 새로운 몰입형 스토리텔링을 만드는 대표적인 기업이다. 현장에서 기어이는 1900년대 초 한국 경복궁에서의 연회를 가상공간에 완벽히 재현해 각광을 받았다. 참석자들은 120년 전 한국 고공에서 열리는 만찬회에 참석, 다른 사람들과 교감을 할 수 있다. 가상 공간이지만 상대방의 반응에 따라 스토리가 변한다는 측면에서 AI이후 등장하는 '시청 경험의 혁신'의 사례로도 볼 수 있다.


3. 비용 절감과 생산성 향상: “비전을 빨리, 그리고 싸게 구현하라”

와이저는 AI를 통해 대규모 마케팅 콘텐츠를 생성·편집하거나, 스크립트와 이미지를 자동화하는 사례를 소개하며, 이는 단순히 “새로운 도구 하나를 쓰는 것” 이상으로 창작 현장의 패러다임을 바꿀 수 있다고 강조했다.

“창작자가 머릿속에 그린 비전을 현실로 구현하는 데 필요한 시간과 마찰을 줄이는 것이 핵심입니다. AI는 그 과정을 획기적으로 단축시켜, 더 많은 시도와 실험이 가능하게 만듭니다.”
  • 프리비즈(Pre-visualization) 기술: 세트가 지어지기 전부터 가상공간에서 배경, 조명, 캐릭터 움직임 등을 시뮬레이션함으로써, 촬영 현장에서 발생할 수 있는 시행착오와 비용을 절감한다.
  • 가상 스튜디오: AI 기반으로 카메라 앵글, 조명, 소품 배치 등을 실시간으로 바꿔보며 한 장면을 여러 버전으로 테스트할 수 있어, 최적의 연출을 빠르게 찾아낼 수 있다.
  • 시나리오·카피 작성: 기본 자료나 예시를 학습한 AI가 초안을 제안하고, 작가는 이를 보완해 완성도를 높이는 식으로 반복 횟수를 크게 줄일 수 있다.

SXSW2025에서 MBC 사내 벤처 도스 일레븐(Dost Eleven)은  AI를 이용, 영상을 생성, 편집하고 특정 장면, 음성과 자막을 자동으로 뽑아낼 수 있는 AI스튜디오 솔루션,  '비디오 스쿠버(Video Scoover)'를 선보였다. 양효걸 도스트 일레븐 대표는 "AI영상 생성은 콘텐츠 제작 과정을 민주화할 수 있다"며 "제작 과정이나 제작비도 크게 줄어들어 크리에이터도 스튜디오급 콘텐츠를 만들어낼 수 있다"고 강조했다.

한국 방송사 MBC의 사내 벤처 AI스튜디오 도스트 일레븐(Dost Eleven)

와이저가 지적했듯, AI를 이용, 콘텐츠 제작의 혁신을 가져온 한국 기업들도 많다. AI기반 디지털 휴먼, 디에이징(de-aging) 등의 작업을 가능하게 하는 '빔리얼 솔루션(B’mReal Solution)을 개발한 빔스튜디오(BEAM Studio)는 인간 배우들의 연기 수명을 테크로 크게 늘렸다. 홍콩 액션 스타 성룡이 등장하는 중국 영화를 오슨틴 현장에서 선보여 미팅 요청이어졌다.

Reduce Costs and Increase Productivity: "Realize Your Vision Faster and Cheaper"


Weiser cited examples of using AI to create and edit marketing content at scale, or automate scripts and images, and emphasized that it's more than just "one new tool" that can change the paradigm in the creative space.
"It's all about reducing the time and friction required for creators to bring their vision to life. AI can dramatically shorten that process, allowing for more trial and experimentation."

  • Pre-visualization technology: Simulate backgrounds, lighting, character movements, and more in a virtual space before a set is even built, reducing the amount of trial and error and cost that can occur on set.
  • Virtual studios: AI-powered tools allow you to test multiple versions of a scene by changing camera angles, lighting, prop placement, and more in real time to quickly find the best look.
  • Screenplay and copywriting: After learning from basic materials or examples, AI suggests a draft, and writers can improve it to make it perfect, greatly reducing the number of iterations.

At SXSW 2025, MBC's in-house venture Dost Eleven showcased Video Scoover, an AI studio solution that uses AI to create and edit videos and automatically extract specific scenes, voices, and subtitles. "AI video generation can democratize the content creation process," said Yang, CEO of Dost Eleven. "The production process and production costs are greatly reduced, and creators can produce studio-quality content."

As Wiser points out, there are many Korean companies that are using AI to revolutionize content creation. BEAM Studio, which developed the B'mReal Solution, which enables AI-powered digital humans, de-aging, and more, has significantly increased the acting lifespan of human actors with technology. A Chinese movie starring Hong Kong action star Jackie Chan was shown on-site at Orson Tin, prompting a request for a meeting.

Q&A: 새 시대의 인재상부터 윤리 이슈까지

“미래 영상 제작자를 위한 조언”

  • 기본기: “영상 제작의 기초를 튼튼히 하지 않고 AI만 의존하는 것은 한계가 뚜렷하다. 기획·연출·편집에 대한 전통적 원리를 먼저 숙지해야 한다.”
  • AI 직접 활용: “모두가 처음 시도하는 분야이므로 실습을 통해 본인만의 직감을 기르는 것이 중요하다.”
  • 창의성과 기술의 연결고리: “앞으로는 예술과 기술의 경계가 빠르게 허물어진다. AI 도구를 적극적으로 이해하고 활용할 줄 아는 인재가 매우 귀중해질 것이다.”

“윤리적 과제와 지적 재산권 보호”

  • 허위정보 감시: 파라마운트 산하의 CBS 뉴스에서는 AI 생성 여부를 감지하고 오보·합성 정보를 검증하는 전담 팀을 운영한다.
  • 윤리·법률 TF 구성: 파라마운트 법무팀과 CTO 조직이 협업해, AI 기술이 창작물과 저작권자, 제작사, 시청자 등 모든 이해관계자에게 미칠 영향을 계속 점검하고 있다.

“퀀텀 컴퓨팅(양자 컴퓨팅)의 가능성은?”

  • 필 와이저는 “향후 5년 내 영상 제작 현장에서 퀀텀 컴퓨팅이 즉각적인 변화를 일으킬 가능성은 크지 않다”고 전망했다. 다만, AI 연산 및 전력 비용 절감 효과가 기대되는 만큼 장기적으로는 관심을 갖고 주시할 계획이라고 덧붙였다.

“AI의 핵심 가치: 더 나은 창작 환경과 혁신된 시청 경험”

약 1시간 동안 진행된  세션에서, 필 와이저는 “AI 기술의 가장 큰 의미는 ‘창작 과정의 마찰을 줄여’ 더 많은 아이디어가 현실화될 수 있게 돕는 것”이라며 마무리했다. 그는 “크리에이터들이 가졌던 상상이 더 짧은 시간 안에, 더 적은 비용으로 구현된다면, 결과적으로 미디어 산업 전반이 풍요로워질 것”이라고 강조했다.

또, AI에 대한 막연한 두려움보다는 적극적인 탐구와 실험이 필요한 시점임을 거듭 역설했다. “모두가 정답이 없는 상황에서 탐험 중이니, 직접 부딪혀 경험하고 새로운 방식으로 활용할 기회를 놓치지 말라”는 조언은 현장에서 큰 공감을 받았다.

AI's Evolving Role in the Media Industry

This  summarizes a live SXSW talk on how the role of AI is evolving in the media industry. Phil Weiser, CTO of Paramount, explains how AI can be utilized in a variety of areas, including content creation, idea development, marketing, and more.

He discusses the impact of AI on filmmaking, particularly in relation to visual effects. He also discusses the ethical issues and intellectual property issues that may arise in the creative process as AI technology evolves. Ultimately, the talk balances the positive changes AI will bring to the media industry with the potential risks, and emphasizes the need for industry-wide collaboration to effectively utilize AI technology.

1. 🎭 SXSW: A Hub for Creative Convergence (00:02:24)

. SXSW in Austin, Texas, is described as "the place to be on the planet" during its run, known for its hospitable atmosphere and creative spirit.

. The event features a diverse lineup, transitioning from film to music, attracting young creatives and fostering a vibrant atmosphere.

. SXSW showcases international collaborations in music, such as Australian artist VvPete teaming up with South African Gqom collective.

. The festival is particularly noted for its emphasis on comedy films, with the Paramount theater considered an ideal venue for comedy premieres.

. Phil Wiser's upcoming talk on AI in media is highlighted, with a digital Q&A feature available through the SXSW Go app for audience engagement.

2. 🎬 AI's Evolution in Media: Paramount CTO's Insights (00:06:09)

. Phil Wiser, Paramount's CTO, explores AI's role in the media industry, drawing from his extensive experience in technology and entertainment.

. The talk aims to provide perspectives on how companies like Paramount are navigating the complex terrain of AI implementation in the entertainment sector.

. Wiser emphasizes the importance of education and hands-on experience with AI tools for executives and creative teams at Paramount.

. The use of machine learning in visual effects, exemplified by "The Curious Case of Benjamin Button," demonstrates AI's long-standing presence in the industry.

. Current concerns about AI in media echo past apprehensions about visual effects, highlighting the need for balanced consideration of AI's impact.

3. 🚀 AI's Evolution in Media: From Translation to Content Creation (00:13:16)

. Google's 2017 breakthrough in neural network-based translation marked a significant leap in AI capabilities, scaling models to trillions of parameters.

. The diffusion of AI in media accelerated in 2022, with advancements in image generation (Midjourney) and language models (ChatGPT), raising concerns about content creation and intellectual property.

. Video generation AI, exemplified by OpenAI's Sora in 2024, showed progress but still falls short of full-scale media production quality.

. AI's current role in media is less about replacing creators and more about assisting in various stages of production, from script analysis to asset management.

. AI tools are enhancing efficiency in idea development, content creation, and marketing by analyzing trends, estimating production costs, and enabling smart searches in vast media libraries.

3.1. AI's Breakthrough Wave and Media Industry Impact

. In 2017, Google made a significant AI breakthrough in translation using neural networks and machine learning techniques.

. This breakthrough enabled AI models to scale to trillions of parameters, surpassing previous computational barriers.

. At Hearst, the potential impact of AI on information-based businesses prompted a major educational event with tech leaders.

. The AI wave's momentum built slowly, leading to significant developments in 2022 with diffusion models and ChatGPT's release.

. Media companies need to understand AI's potential to create content, considering intellectual property implications and industry-wide engagement.

3.2. AI's Impact on Video Generation and Media Industry

. In 2023, AI video generation progressed from silly clips to more serious applications, exemplified by OpenAI's Sora release in February.

. Sora improved video generation from 5-8 second moderate quality clips to 30-second higher quality videos with more coherence.

. Despite improvements, AI-generated videos still fall short of full-scale media company productions.

. The 2025 reality for AI in media is less exciting than imagined, focusing on the "working phase" rather than replacing directors.

. Comparing the AI wave to the internet boom, there's a long runway ahead for development, with major innovations potentially coming after the initial hype.

3.3. AI's Complex Challenges and Opportunities in Media

. AI in media faces a triple curse: complexity, experimental nature, and limited conversation, leading to fear and uncertainty.

. Current video foundation models are insufficient for creating high-quality videos needed in the industry, highlighting the need for innovation.

. The media industry's AI innovations often stem from storytellers pushing technology forward, exemplified by James Cameron's work.

. Positive voices like James Cameron and Ben Affleck are emerging, recognizing AI's potential in the media industry.

. Overcoming limitations requires fostering a community-driven approach and open conversations, similar to tech startup ecosystems.

3.4. AI's Impact on Media Production Process

. Greenlight 2030 project by Movie Labs identifies numerous areas where AI could assist in the production process, from script drafting to post-production.

. AI is currently being utilized effectively in developing ideas, content creation, and marketing across the media industry.

. Predictive analytics using machine learning models analyze streaming services and social media data to inform creative decisions and identify resonant stories.

. AI tools can process scripts to estimate production costs by analyzing scenes and shoot requirements, streamlining a previously laborious process.

. The media industry is essentially a "text to video" business, making the text phase crucial in the production process.

3.5. AI-Powered Media Asset Management and Editing

. Paramount, as a large-scale media company, possesses tens of millions of assets, including 20 million video/audio assets and 14 million photo stills.

. AI tools are used to create vector embeddings of assets, enabling sophisticated searches beyond metadata, such as finding specific scenes like "fire in the woods" or "motorcycle riding on the beach".

. The AI system was used to find and produce the Benjamin Button excerpt from the archive, demonstrating its practical application in content creation.

. A comparison between traditional and AI-assisted editing methods shows that the "Secret Formula" smart search tool significantly speeds up the process of finding specific clips.

. The AI-powered method allows editors to quickly locate, mark, and compile relevant clips, drastically reducing the time spent on manual searching and script reading.

4. 🎬 AI's Impact on Video Production and Marketing (00:28:31)

. AI tools are enhancing editing efficiency, allowing editors to focus on creative aspects rather than laborious tasks.

. AI is improving content recommendation on streaming services by better understanding and connecting content with consumers.

. AI is revolutionizing marketing content creation, enabling quick generation of derivative content and pre-visualization of ideas.

. AI facilitates personalized consumer engagement, as demonstrated by the "Imaginary Friends" marketing campaign.

. AI solves production challenges in marketing, such as integrating NFL players into Gladiator 2 promotions without physical presence.

4.1. AI Enhancing Media Production and Streaming Services

. AI-assisted editing significantly reduces production time, allowing an 8.5-minute cut of an entire series in just over 10 minutes.

. The "secret formula" method aims to make clip compilations efficient, not replace editors, enabling them to focus on the flow of their edit.

. AI's understanding of content enables better connection with consumers through improved recommendation systems on streaming platforms.

. Paramount Plus and other media companies use AI to drive engagement by organizing content and personalizing navigation.

. While personalized versions of shows aren't seriously considered, AI-powered personalized navigation to relevant content is already implemented and effective.

4.2. AI-Driven Marketing Innovations in Media

. AI generates large volumes of derivative content for marketing, efficiently cutting and repurposing existing video assets to fit different narratives.

. AI tools effectively convert written articles to video elements and transform early-stage ideas into visual pre-visualizations.

. For the film "Imaginary Friends," AI enabled consumers to create personalized imaginary monsters, enhancing brand engagement.

. AI solved complex marketing challenges for "Gladiator 2," integrating NFL players into a Coliseum setting without physical presence.

. The technology combined face embeddings and AI-generated backgrounds to create a large-scale marketing release, demonstrating market confidence in AI capabilities.

4.3. AI's Impact on Video Production Stages

. AI is revolutionizing every element of video creation, from pre-production to post-production, with varying degrees of progress across different stages.

. Pre-production areas have seen significant advancements, with script analysis and pre-visualization tools already operational and effective.

. The production stage is still evolving, while post-production has made strides in areas like aging and de-aging techniques.

. Dubbing technology has become highly effective, but its widespread use is hindered by rights issues that are expected to resolve over time.

. The implementation of AI across various production stages is progressing gradually, with a three to five-year timeline for comprehensive integration rather than rapid adoption.

4.4. Challenges and Innovations in AI-Generated Video

. Creating consistent and coherent video with a story arc remains a challenge for AI systems, particularly in maintaining character appearance across scenes.

. Controlling continuity in scene style, characters, and visual effects is crucial but difficult, as small prompt changes can lead to drastically different outputs.

. An innovative approach called 'Aura' uses small AI models to capture and represent consistent elements, improving efficiency in character representation.

. The 'AI-to-AI conversation' between small Aura models and large foundation models is driving progress in controlling AI-generated video output.

. Current AI-generated videos still struggle with creating lifelike humans, falling into the "uncanny valley" despite high-fidelity renderings.

4.5. Fostering Industry-Wide Collaboration for AI Advancement

. Media industry needs thoughtful, deep, and technical conversations about AI implementation in video production, moving beyond headlines.

. Embracing technological advancements and engaging with the market is crucial for fostering collaboration across media and tech industries.

. A significant "Silicon Valley-Hollywood gap" exists, with tech companies lacking intuition about audio-visual content creation.

. Addressing IP issues and bias in AI models is essential to ensure proper representation and avoid intellectual property infringement.

. Recent examples of AI advancements in the industry will be presented to illustrate these points.

5. 🎬 AI's Impact on Video Production and Animation (00:42:00)

. AI-generated music videos, like Wu-Tang Clan's, demonstrate consistent character rendering and coherent style across scenes, despite limitations in live video generation.

. AI animation techniques show significant progress, with examples ranging from photo-realistic to hand-drawn 2D effects, achieving high quality and crispness without typical AI artifacts.

. 3D animation technology has advanced to near Pixar-level quality, as demonstrated by the "Chaboom" project from the Entertainment Technology Center, showcasing improved physics and lighting.

. AI is revolutionizing virtual sets, allowing for real-time environment changes and enabling directors to make creative decisions based on near-final visuals during production.

. The future of filmmaking may involve "agile video development", reducing friction between a creator's vision and its realization, potentially leading to faster and cheaper production processes.

5.1. AI-Generated Wu-Tang Clan Music Video

. The video showcases AI-driven consistency in character appearance and scene style across independently generated frames.

. Characters, like Mandingo, maintain a consistent look throughout the video, demonstrating AI's ability to create coherent visuals.

. The video exhibits a consistent style, including night scenes and rain effects, despite each frame being generated independently.

. While the video looks slightly animated, it represents the state-of-the-art control and steerability in AI-generated live video.

. The creators used large Foundation models with added control to generate coherent visuals, showcasing AI's potential in video creation.

5.2. AI's Advancements in Animation Techniques

. AI-generated animation shows remarkable progress, offering crisp, high-fidelity results across various styles.

. The quality of AI animations is often indistinguishable from traditional methods, lacking typical AI blur effects.

. AI enables seamless transitions between different animation styles, from photo-realistic to 2D hand-drawn effects.

. Practitioners working with state-of-the-art AI animation techniques express optimism about its potential.

. While live-action AI video faces challenges like the uncanny valley, animation presents significant opportunities for AI application.

5.3. Latest Advancements in AI-Driven 3D Animation

. The Entertainment Technology Center (ETC) at USC has developed high-quality 3D animation technology, showcased in their project "Chaboom".

. The animation demonstrates Pixar-level quality, featuring accurate physics, detailed lighting, and realistic elements like glasses.

. This AI-generated animation utilizes advanced techniques such as control and steerability, representing state-of-the-art technology.

. The quality of the animation has significantly improved over the past year, surpassing earlier issues like unrealistic body parts or effects.

. ETC collaborates across the studio and technology ecosystem to advance the state-of-the-art by producing stories, similar to James Cameron's approach.

5.4. Agile Video Development: Real-time Innovation in Filmmaking

. Virtual sets with LED displays enable dynamic environment changes, potentially revolutionizing film production through AI-generated imagery.

. The concept of "Holodeck"-like environments allows for real-time scene adjustments, making the filmmaking process more flexible and efficient.

. A short film "Europa" demonstrated how AI-enhanced virtual sets enable directors to make creative decisions based on near-final visuals in real-time.

. This shift towards real-time feedback in filmmaking parallels the evolution from waterfall to agile methodologies in software development.

. Reducing friction between a creator's vision and its realization is a key goal, potentially making idea execution faster and cheaper.

5.5. AI Skills and Ethics in Future Filmmaking

. Future filmmakers need to understand AI tools while mastering fundamental filmmaking skills, serving as a bridge between creativity and technology.

. Hands-on experience with AI tools is crucial; professionals should use them daily to develop intuition, as there's no established playbook.

. AI may enable real-time evolution of storylines in episodic series based on consumption feedback, potentially impacting traditional formats.

. CBS News formed a group called "CBS News Confirmed" to detect AI-generated content and prevent misinformation in news gathering.

. Paramount created a task force with their General Council to consider all stakeholders and potential downsides when advancing AI technology.

AI's Evolving Role in the Media Industry |

미디어 산업에서 AI의 역할이 어떻게 진화하고 있는지에 대한 SXSW 라이브 강연을 요약했다. 파라마운트( Paramount)의 CTO인 필 와이저(Phil Weiser)는 AI가 콘텐츠 제작, 아이디어 개발, 마케팅등 다양한 분야에서 어떻게 활용될 수 있는지 설명한다.

그는 AI가 영화 제작에 미치는 영향에 대해 논하며, 특히 시각 효과와 관련된 과거 사례를 소개한다. 또한, AI기술이 발전함에 따라 창작 과정에서 발생할 수 있는 윤리적 문제와 지적 재산권 문제에 대해서도 언급한다. 궁극적으로 이 강연은 AI가 미디어 산업에 가져올 긍정적인 변화와 잠재적 위험을 균형 있게 조명하며, AI기술을 효과적으로 활용하기 위한 산업 전반의 협력을 강조한다.

1. 🎭 SXSW: 창의성과 혁신의 중심지 (00:02:24)

. SXSW는 오랫동안 이 시기에 세계에서 가장 주목받는 행사 중 하나로 자리잡았다.

. 오스틴은 환대와 독특한 분위기로 유명한 도시로, SXSW의 개최지로서 큰 역할을 한다.

. SXSW는 영화, 음악, 젊은 창작자들의 활동이 어우러진 다양한 문화의 융합을 보여준다.

. 이 행사는 특히 코미디 영화를 주목받게 하는 유일한 영화제로 평가받고 있다.

. SXSW는 자원봉사자들의 도움으로 운영되며, 이들의 노력이 행사의 성공에 크게 기여한다.

2. 🎬 AI와 미디어 산업의 진화: 과거와 현재 (00:06:09)

. Paramount의 CTO인 Phil Weiser가 AI와 미디어 산업의 관계에 대해 심도 있는 통찰을 제공한다.

. AI기술은 미디어 산업에서 오랫동안 사용되어 왔으며, 2000년대 중반"벤자민 버튼의 시간은 거꾸로 간다" 영화에서 획기적인 시각 효과를 위해 활용되었다.

. 당시 컴퓨팅 파워의 한계로 인해 혁신적인 기술이 필요했고, 이는 현재 AI를 위한 대규모 데이터 센터 구축과 대조된다.

. 시각 효과기술의 발전으로 배우의 연기와 시각 효과사이의 경계가 모호해지면서, 현재 AI기술 적용에 대한 우려와 유사한 논란이 있었다.

. AI기술의 확률적 특성으로 인해 기존의 결정론적 시각 효과기술보다 더 큰 우려를 불러일으키고 있다.

3. 🚀 AI 기술의 발전과 미디어 산업에서의 활용 (00:13:16)

. AI기술은 2017년 구글의 번역 기술 혁신을 시작으로 큰 발전을 이루었으며, 신경망과 기계학습 기술을 활용해 수조 개의 매개변수를 가진 모델로 발전했다.

. 2022년 말 ChatGPT의 등장으로 AI가 콘텐츠 생성 능력을 갖추게 되면서, 미디어 업계는 AI의 잠재력과 지적 재산권문제에 주목하기 시작했다.

. 2024년에는 AI비디오 생성 기술이 발전했지만, 아직 전문적인 미디어 제작 수준에는 미치지 못하며, AI는 현재 작업 보조 단계에 있다.

. AI는 미디어 산업에서 아이디어 개발, 콘텐츠 생성, 마케팅 분야에서 활용되고 있으며, 특히 스크립트 분석과 라이브러리 자산 관리에서 큰 도움을 주고 있다.

. AI기반 스마트 검색 도구는 편집자들의 작업 효율성을 크게 향상시키고 있으며, 이는 미디어 제작 과정을 혁신적으로 변화시키고 있다.

3.1. AI 기술의 발전과 미디어 산업의 대응

. 2017년 구글의 신경망 기반 번역 기술 도입으로 AI분야에 큰 혁신이 일어났다.

. AI모델의 규모가 수십억 개에서 수조 개의 매개변수로 확장되면서 컴퓨팅 능력의 한계를 극복했다.

. Hearst의 CTO로 재직 중이던 화자는 AI기술의 잠재력을 인식하고 회사 내 교육과 인식 제고에 힘썼다.

. 2022년 말 ChatGPT의 등장으로 AI기술이 급속도로 발전하면서 미디어 산업에 큰 영향을 미치기 시작했다.

. AI기술의 발전에 따른 지적 재산권 문제와 기술 기업들과의 협력 필요성이 대두되었다.

3.2. AI 비디오 생성 기술의 발전과 한계

. 2023년에는 AI비디오 생성 기술이 본격적으로 등장했으나, 초기에는 단순하고 짧은 클립 생성에 그쳤다.

. Open AI의 Sora 출시로 30초 길이의 고품질 비디오 생성이 가능해졌지만, 여전히 전문적인 미디어 제작 수준에는 미치지 못했다.

. 2025년의 현실은 로봇 감독의 등장과 같은 극적인 변화보다는 AI의 실용적인 작업 단계에 머물 것으로 예상된다.

. AI기술의 발전 주기는 인터넷 초창기와 비슷한 패턴을 보이며, 초기 열풍 이후 장기적인 발전 과정을 거칠 것으로 전망된다.

. Google이나 Meta와 같은 혁신적 기업들이 인터넷 초기 열풍 이후에 등장했듯이, AI분야에서도 새로운 혁신 기업들의 출현이 예상된다.

3.3. 미디어 산업에서의 AI 도전과 기회

. AI는 현재 미디어 산업에서 복잡성, 실험적 성격, 예상치 못한 결과로 인한 '삼중의 저주'에 직면해 있다.

. 기술의 복잡성과 실험적 특성으로 인해 AI에 대한 두려움이 생겨나고 있으며, 이는 과거 공상과학 작품들로 인해 더욱 증폭되고 있다.

. 현재의 대규모 기반 모델들은 고품질 비디오 제작에 필요한 수준에 아직 도달하지 못했으며, 이 분야에서의 혁신이 더 필요하다.

. 미디어 산업에서는 AI에 대한 대화를 제한하려는 경향이 있지만, 실제로는 커뮤니티와 열린 대화를 통해 새로운 아이디어를 발전시키는 것이 중요하다.

. James Cameron과 Ben Affleck 같은 영향력 있는 인물들이AI의 긍정적 잠재력을 강조하고 있으며, 특히 기술 혁신과 스토리텔링의 결합이 미디어 산업의 큰 혁신을 이끌어낼 수 있다.

3.4. AI를 활용한 미디어 제작 프로세스 혁신

. Movie Labs의 Greenlight 2030 프로젝트는 AI가 미디어 제작 전 과정에서 어떻게 활용될 수 있는지 보여주는 청사진이다.

. 현재 AI는 아이디어 개발, 콘텐츠 생성, 마케팅분야에서 특히 효과적으로 활용되고 있다.

. 예측 분석 AI는 스트리밍 서비스와 소셜 미디어 데이터를 분석하여 시의적절한 스토리 개발에 도움을 준다.

. AI는 스크립트 분석을 통해 제작 비용을 예측하고, 이전에는 노동 집약적이었던 프로세스를 효율화한다.

. 이러한 AI도구들은 창작 과정을 완전히 대체하는 것이 아니라, 의사 결정과 제작 과정을 보조하고 효율화하는 역할을 한다.

3.5. AI를 활용한 미디어 자산 검색 및 활용

. Paramount와 같은 대규모 미디어 기업은 수천만 개의 미디어 자산을 보유하고 있으며, 이를 효율적으로 활용하는 것이 중요하다.

. AI기반 벡터 임베딩 기술을 사용하여 메타데이터 검색을 넘어 특정 장면이나 요소를 포함하는 자산을 쉽게 찾아낼 수 있다.

. 이 기술을 통해 편집자들은 "Secret Formula"라는 스마트 검색 도구를 사용하여 작업 효율성을 크게 높일 수 있다.

. 전통적인 방식으로 스크립트를 일일이 확인하는 것보다, AI도구를 사용하면 원하는 장면을 몇 초 만에 찾아내고 편집할 수 있다.

. 이러한 AI기술은 편집자들의 작업 시간을 크게 단축시키고, 콘텐츠 제작과정을 혁신적으로 개선하고 있다.

4. 🎬 AI를 활용한 영상 제작의 현재와 미래 (00:28:31)

. AI기술은 영상 편집 시간을 크게 단축시키며, 편집자들이 창의적인 작업에 더 집중할 수 있게 한다.

. 스트리밍 서비스에서는 AI를 통해 콘텐츠를 더 깊이 이해하고 소비자와 효과적으로 연결하는 데 활용하고 있다.

. 마케팅분야에서 AI는 대량의 콘텐츠 생성과 기존 콘텐츠의 변형에 효과적으로 사용되고 있다.

. AI를 활용한 소비자 참여형 마케팅이 등장하고 있으며, 영화 '이매지너리 프렌즈'의 사례처럼 개인화된 콘텐츠 생성이 가능해졌다.

. 현재 AI영상 생성 기술의 주요 과제는 일관성 있는 스토리 아크 생성과 캐릭터의 연속성 유지이며, 이를 해결하기 위해 '로라(Lora)' 같은 소규모 AI모델이 활용되고 있다.

4.1. AI를 활용한 영상 편집 및 스트리밍 서비스 개선

. AI를 활용한 'secret formula' 방식으로 8분30초 분량의 전체 시리즈 편집을 10분 만에 완성할 수 있다.

. AI는 편집자를 대체하는 것이 아니라, 클립 검색 시간을 줄이고 편집의 흐름에 집중할 수 있게 하는 특별한 도구이다.

. 스트리밍 서비스에서 AI를 활용해 콘텐츠를 새로운 방식으로 이해하고, 소비자와 더 효과적으로 연결할 수 있다.

. AI기술을 통해 콘텐츠의 임베딩을 생성하고, 이를 추천 시스템에 적용하여 사용자 경험을 개선한다.

. 개인화된 콘텐츠 네비게이션은 현재 실현되고 있으며, 매우 강력한 효과를 보이고 있다.

4.2. AI를 활용한 혁신적인 마케팅 전략

. AI는 대량의 마케팅 콘텐츠 생성에 효과적으로 활용되며, 기존 콘텐츠를 다양한 형태로 변환하거나 재구성하는 데 유용하다.

. 'Imaginary Friends' 영화 마케팅에서는 AI를 활용해 소비자가 직접 상상 속 친구를 스케치하고 생성할 수 있게 하여 개인화된 콘텐츠 경험을 제공했다.

. 'Gladiator 2' 마케팅에서는 AI를 활용해 NFL 선수들의 얼굴을 콜로세움 배경에 합성하는 등 복잡한 마케팅 문제를 해결했다.

. AI기술은 마케팅콘텐츠의 사전 시각화 단계에서 아이디어를 이미지나 영상으로 빠르게 구현하는 데 효과적이다.

. 이러한 AI기술의 활용은 대규모 마케팅캠페인에서도 신뢰할 만한 수준으로 발전했으며, 산업 전반에 걸쳐 광범위하게 적용되고 있다.

4.3. AI가 영상 제작 과정에 미치는 영향과 현재 상황

. AI는 영상 제작의 모든 단계에 영향을 미치고 있으며, 특히 프리 프로덕션 단계에서 이미 많은 부분이 실현되어 효과를 보고 있다.

. 스크립트 분석, 사전 시각화, 더빙 기술 등에서 AI기술이 성공적으로 적용되고 있지만, 프로덕션 단계에서는 여전히 발전 중이다.

. AI를 활용한 QC(품질 관리)와 이미지 업스케일링 기술은 라이브 스포츠 중계에서 슬로모션과 프레임 보간 등에 활용되고 있다.

. AI기술의 영상 제작 분야 적용은 단기간에 이루어지지 않고, 대략 3~5년의 시간이 소요되는 장기적인 과정이다.

. 더빙 기술은 이미 효과적으로 작동하지만, 저작권 문제 등으로 인해 업계 전반에 널리 사용되지는 않고 있다.

4.4. AI 영상 제작의 한계와 혁신적 해결 방안

. AI시스템은 아직 일관성 있고 응집력 있는 스토리 아크를 가진 비디오를 만드는 데 어려움을 겪고 있다.

. 캐릭터와 장면의 일관성 유지가 AI영상 제작의 주요 과제이며, 현재의 대규모 기반 모델로는 이를 완전히 해결하기 어렵다.

. 'Aura'라는 혁신적인 소규모 AI모델이 등장해, 캐릭터나 스타일의 일관성을 유지하는 데 도움을 주고 있다.

. Aura 모델은 AI언어로 캐릭터를 해석하고, 이를 대규모 기반 모델과 'AI 대 AI 대화' 형식으로 소통하여 효율적인 결과를 얻는다.

. AI로 생성된 인간 캐릭터는 아직 생동감이 부족하며, 단순히 더 많은 데이터를 모델에 투입하는 것만으로는 이 문제를 해결하기 어려울 것으로 보인다.

4.5. 미디어 산업의 AI 활용을 위한 협력과 과제

. 미디어 산업은 비디오 시스템의 근본적인 재구성이 필요하며, 이를 위해 업계 전반의 심도 있는 기술적 논의가 중요하다.

. 기술 발전을 수용하고 시장과 소통하며, 산업 전반의 협력을 촉진해야 한다.

. 실리콘밸리와 할리우드 간의 이해 격차를 줄이고, 비디오, 오디오, 음악 제작에 대한 상호 이해를 높여야 한다.

. IP 문제와 AI 모델의 편향성 해결이 중요하며, 세계를 올바르게 표현하고 타인의 지적 재산권을 침해하지 않도록 주의해야 한다.

. 이러한 노력의 일환으로 최근 공개된 흥미로운 사례들이 있다.

5. 🎬 AI를 활용한 미디어 콘텐츠 제작의 혁신 (00:42:00)

. Wu-Tang Clan의 뮤직비디오는 AI생성 영상의 일관성과 제어 가능성을 보여주는 좋은 예시다.

. AI생성 애니메이션은 다양한 스타일과 기법을 구현할 수 있으며, 특히 2D와 3D 애니메이션에서 높은 품질을 보여준다.

. 가상 세트 기술과 AI의 결합으로 실시간으로 환경을 변경하고 최종 결과물에 가까운 영상을 볼 수 있게 되었다.

. AI기술은 창작자의 비전을 더 빠르고 저렴하게 구현할 수 있게 해주며, 이는 애자일 비디오 개발 방식으로 이어질 것으로 예상된다.

. 미래의 영화 제작자들은 기본적인 영화 제작 기술과 함께 AI도구에 대한 이해와 활용 능력이 필요할 것이다.

5.1. AI를 활용한 Wu-Tang Clan의 혁신적인 뮤직비디오

. Secret Level Studios가 제작한 Wu-Tang Clan의 뮤직비디오는AI 생성 비디오의 최신 기술을 보여준다.

. 이 비디오의 혁신적인 점은 장면이 바뀌어도 Mandingo 캐릭터의 일관성이 유지된다는 것이다.

. AI생성 비디오의 한계로 약간 애니메이션처럼 보이지만, 스타일의 일관성과 제어 가능성에서 현재 기술의 최고 수준을 보여준다.

. 각 프레임이 독립적으로 생성됨에도 불구하고, 밤 분위기, 비 효과, 캐릭터의 일관성이 유지되는 것이 주목할 만하다.

. 이 비디오는 대규모 기반 모델을 사용하고 그 위에 제어 기능을 추가하여 일관성 있는 결과물을 만드는 현재 AI기술의 대표적인 예시이다.

5.2. AI 기반 애니메이션 기술의 발전

. AI기반 애니메이션은 실사 영상과 달리 높은 품질과 다양한 스타일을 구현할 수 있어 큰 기회로 여겨진다.

. Secret Level Studios의 몽타주 영상은 포토리얼리스틱 기법부터 2D 손그림 효과까지 다양한 애니메이션 기법을 선보인다.

. AI생성 애니메이션은 선명도와 충실도가 높으며, 스타일 간 전환이 자연스러워 전문가들 사이에서 낙관적으로 평가받고 있다.

. AI로 생성된 애니메이션은 품질과 선명도가 뛰어나 일반적으로 AI생성 여부를 구분하기 어려울 정도로 발전했다.

. 다만 AI영상을 자주 접하는 전문가들은 AI생성 애니메이션의 일관된 스타일적 특징을 통해 구분할 수 있다.

5.3. AI를 활용한 고품질 3D 애니메이션 기술의 발전

. Entertainment Technology Center(ETC)에서 최신 고품질 3D 애니메이션 기술을 선보이는 "Chaboom" 프로젝트를 개발했다.

. 이 기술은 픽사 수준의 품질을 목표로 하며, 물리 엔진, 조명, 세부 표현 등에서 뛰어난 성능을 보여준다.

. AI생성 기술을 활용하여 제작된 이 애니메이션은 제어 가능성과 조향성 등의 기술을 적용해 높은 완성도를 달성했다.

. 최근 1년 동안AI애니메이션 기술이 급속도로 발전하여, 이전의 부자연스러운 표현들을 크게 개선했다.

. 이러한 기술 발전은 실시간 창의적 결정과 제작 워크플로우 개선에 기여할 것으로 예상된다.

5.4. 실시간 비디오 개발과 AI의 혁신적 활용

. 실시간 비디오 개발 기술은 창작 과정에서 즉각적인 피드백과 반복적 개선을 가능하게 한다.

. 가상 세트와 AI 기술의 결합으로 영화 제작 환경을 실시간으로 변경할 수 있게 되었다.

. 'Europa' 단편 영화 제작에서는 AI를 활용한 가상 세트로 실시간 창작 과정의 혁신을 보여주었다.

. 감독은 최종 결과물에 가까운 영상을 실시간으로 확인하며 창의적 결정을 내릴 수 있게 되었다.

. 이러한 애자일 비디오 개발 방식은 소프트웨어 개발의 연속적 통합 및 배포 방식과 유사하며, 창작자의 비전을 더 빠르고 저렴하게 구현할 수 있게 한다.

5.5. AI 시대의 영화 제작자와 윤리적 고려사항

. 미래의 영화 제작자들은 AI도구를 이해하면서도 영화 제작의 기본기를 갖추어야 한다.

. AI도구를 매일 사용하며 직접 경험을 쌓아 직관을 개발하는 것이 중요하다.

. AI는 실시간 피드백을 통해 에피소드 시리즈의 스토리라인을 진화시킬 수 있는 잠재력이 있다.

. CBS 뉴스 부서에서는 AI생성 허위정보 탐지를 위한 'CBS News Confirmed' 그룹을 운영하고 있다.

. 파라마운트는 AI발전에 따른 이해관계자 영향을 고려하기 위해 법무팀과 태스크포스를 구성했다.