여러 캐릭터를 움직이고 카메라 앵글도 바꾸는 Wan Animate 2

안녕하세요?
매일 사람이 쓰는 뉴스레터 Daily Prompt입니다.

오늘은 Wan Animate 2를 소개합니다.

여러 캐릭터를 움직이고 카메라 앵글도 바꿉니다

알리바바 Wan 팀이 오픈소스 캐릭터 애니메이션 모델 Wan Animate 2를 공개했습니다. 캐릭터 이미지와 동작이 담긴 참조 영상을 입력하면, 참조 영상의 움직임과 표정을 캐릭터에 옮겨 영상으로 만듭니다. [공식 X 게시물]

이미 Runway Act Two나 Kling의 모션 컨트롤 등의 기능이 등장했기 때문에, 모션을 추적해서 영상을 생성하는 것은 더이상 새롭지는 않습니다. 그럼에도 이번 소식이 눈에 띄었던은, 다중 캐릭터 장면(Multi-character scenes), 즉 아래와 같이 여러 동물이 같은 움직임을 동작하는 것이 가능하기 때문입니다.

두 번째로 주목할 만한 기능은 텍스트 기반 카메라 제어(Text-driven camera control)입니다. 참조 영상이 정면에서 촬영됐더라도 프롬프트에 ‘top view’처럼 원하는 시점을 적어 생성 영상의 카메라 각도를 바꿀 수 있습니다.

마무리

1. Wan Animate 2는 중국의 알리바바에서 공개한 모델로, 오픈웨이트로 발표되었습니다. 컴퓨터의 성능만 괜찮으면 누구든지 모델을 내려받아 영상을 생성할 수 있습니다.
2. 지난 553회 뉴스레터나 700회 뉴스레터에서 이미 인물의 움직임(연기 영상)을 바탕으로 영상 생성을 하는 방법을 소개드린 바 있는데요, 그 때와 다른 점은 여러 캐릭터에게 모션을 적용시킬 수 있고, 카메라 앵글을 바꿀 수 있다는 점입니다.

3. 과거에는 인물의 일관성을 유지하는 것이 어려워서 상상도 못했을 일인데, 이제 이미지의 일관성 유지는 당연한 것이 되었고 영상의 카메라 앵글을 바꾸는 것도 가능해졌습니다.
4. 과거에는 안되던 것이 하나둘씩 해결이 되면서, 그래서 이 무한히 가능한 AI를 가지고 나는 무엇을 하고 싶은가? 라는 질문을 하게 됩니다. 저는 AI 시대에 역설적으로 '예술'이 살아남을 것이라고 믿고 있고, 그래서 기술이 접목된 작품활동을 지속적으로 하는 것이 꿈입니다. 아마 곧 전시 소식을 전하게 될 것 같은데요, 이번 전시에 구독자님들도 꼭 초대하겠습니다 :)

오늘의 Midjourney Prompt & Music

아래 Midjourney 이미지를 음악과 함께 감상해보세요:)

프롬프트 (by @jae_hong__an) :