Adobe Premiere Pro에 도입될 새로운 생성 AI 기능

 

2024년 4월 15일(현지 시간) - 어도비가 올해 어도비 프리미어 프로(Adobe Premiere Pro)에 도입될 새로운 생성 AI 기능의 미리보기를 발표했습니다.

 

 Adobe Premiere Pro에 생성 AI 도구가 탑재됩니다. 

프리미어 프로에 새롭게 추가된 생성 AI 툴은 장면 내 오브젝트 추가 및 삭제, 기존 클립의 확장 등 모든 영상 편집의 효율성을 높여줍니다.  공개된 영상은 다음과 같습니다.

https://youtu.be/6de4akFiNYM

 

위 동영상에서 아래 생성 AI 기능을 확인할 수 있습니다.

• Generative Extend: Generative Extend를 사용하면 프레임을 매끄럽게 추가하여 클립을 길게 만들 수 있습니다. 이를 통해 편집 타이밍을 완벽하게 맞추고 매끄러운 전환을 쉽게 추가할 수 있습니다. 편집을 미세 조정하고, 샷의 비트를 추가하거나 트랜지션을 더 잘 커버하기 위해 여분의 미디어를 생성할 수 있습니다.
• 오브젝트 추가 및 제거: 이 기능은 오브젝트를 선택하고 추적하고 교체하는 것만으로 사용할 수 있습니다. 불필요한 아이템을 삭제하거나, 액터의 옷장을 변경하거나, 그림이나 책상 위의 사실적인 꽃과 같은 세트 드레싱을 빠르게 추가할 수 있습니다.
• Text to Video: Premiere Pro 내에서 직접 완전히 새로운 영상을 만들 수 있습니다. 프롬프트에 텍스트를 입력하거나 참조 이미지를 업로드하기만 하면 됩니다. 촬영하기 어려운 콘셉트나 환상적인 콘셉트를 표현하는 샷을 만들거나, 조달하기 어려운 B-롤을 생성하고, 계획과 속도 배분을 지원하는 플레이스홀더를 만들 수 있습니다.

이러한 새로운 편집 워크플로는 이미지, 벡터, 디자인, 텍스트 효과를 포함한 Firefly 모델 제품군에 추가된 새로운 비디오 모델을 통해 구현되며, 아이디어를 내고 스토리보드를 만들거나 실사 영상을 보강하기 위한 B-롤을 만들 수 있습니다. 

 

OpenAI, Pika Labs, Runway 등의 생성 AI 모델을 Premiere Pro에서 사용할 수 있습니다.

 

어도비는 서드파티 생성 AI 모델을 Premiere Pro와 같은 어도비 애플리케이션에 직접 도입하는 구상도 밝혔습니다. 공개된 영상 후반부에서는 Premiere Pro에 통합된 OpenAI와 Runway의 비디오 생성 모델을 활용하여 프로젝트에 B-롤을 생성하는 모습과 Pika Labs를 Generative Extend 도구로 사용하여 샷의 마지막에 몇 초를 추가하는 모습 를 볼 수 있습니다.

 

어도비 파이어플라이와 다양한 서드파티 모델을 활용한 새로운 생성 AI 기능을 제공함으로써 프리미어 프로에서 매일 사용하는 워크플로우를 벗어나지 않고도 다양한 새로운 기능을 이용할 수 있습니다.

 

초기 생성 AI에 대한 많은 논의는 '최고의' AI 모델을 만들기 위한 기업 간 경쟁에 초점이 맞춰졌지만, 어도비는 업계 표준 도구와 원활한 워크플로우를 제공하는 수천 개의 전문화된 모델, 각기 고유한 틈새시장을 가진 강력한 모델들이 등장할 것으로 예상하고 있다. Adobe Firefly든 다른 특수한 AI 모델이든, Adobe Firefly를 비롯한 Adobe 애플리케이션 내에서 가능한 한 원활하게 작업할 수 있도록 지원하는 것이 목표다. 애플리케이션 내에서 최대한 원활한 통합 프로세스를 구현할 수 있도록 노력하고 있다고 밝혔습니다.

 

AI 모델 제공을 위한 개방형 접근 방식

어도비는 책임감 있는 혁신을 약속하며 자체 AI 모델을 개발하고 있으며, 지금까지 배운 것을 적용하여 애플리케이션 내 타사 모델의 통합이 회사의 안전 표준과 일치하도록 할 계획입니다.

Content Authenticity Initiative의 창립자 중 한 명인 어도비는 온라인 콘텐츠의 영양 라벨 역할을 하는 무료 오픈소스 기술인 Content Credentials를 애플리케이션 내에서 생성된 자산에 첨부하여 하여 사용자가 콘텐츠가 어떻게 생성되었는지, 어도비 플랫폼에서 생성된 콘텐츠를 생성하기 위해 어떤 AI 모델이 사용되었는지 확인할 수 있도록 하겠다고 약속했습니다.

 

 AI 기반 오디오 워크플로우가 Premiere Pro에 추가될 예정입니다.

어도비의 새로운 생성 AI 비디오 도구와 함께 프리미어 프로의 새로운 오디오 워크플로우가 5월부터 일반에 공개될 예정이라고 발표했습니다. 새로운 페이드 핸들, 클립 배지, 다이내믹 파형, AI 기반 카테고리 태깅 등 편집자가 사운드를 정확하게 제어하고 품질을 향상시키는 데 필요한 기능이 추가될 예정입니다.

• 인터랙티브 페이드 핸들: 클립 핸들을 드래그하여 오디오 페이드를 생성하기만 하면 그 어느 때보다 빠르게 맞춤형 오디오 트랜지션을 만들 수 있습니다.

• 오디오 카테고리 태깅이 가능한 새로운 필수 사운드 배지: AI가 자동으로 오디오 클립을 대화, 음악, 사운드 효과, 앰비언스에 태그를 지정하고 새로운 아이콘을 추가하여 클릭 한 번으로 작업에 적합한 컨트롤에 바로 액세스할 수 있도록 도와 줍니다. 한 번의 클릭으로 바로 액세스할 수 있습니다.

• 효과 배지: 새로운 시각적 표시기를 통해 어떤 클립에 효과가 적용되었는지 쉽게 확인할 수 있으며, 새로운 효과를 빠르게 추가하거나 시퀀스에서 효과 매개변수를 자동으로 열 수 있습니다.

• 타임라인의 새로운 파형: 클립의 트랙 높이가 변경되면 파형의 크기도 지능적으로 변경됩니다.