영상읽는 시간 5분

AI 영상 클립, 업스케일할까 최고 해상도로 다시 렌더할까?

완성된 AI 클립을 영상 업스케일러에 넣어야 할 때와 모델의 최고 해상도로 다시 렌더하는 편이 나을 때를 얼굴, 깜빡임, 비용으로 나눠 봅니다.

라임 그린 빛이 도는 라이트박스 위에 놓인 35mm 필름 스트립에는 부드럽고 입자가 굵은 것에서 선명한 것으로 이어지는 산속 호수 프레임들이 담겨 있고, 그중 한 프레임 위에는 놋쇠 루페가 떠 있다

마음에 드는 클립이 있는데 작게 렌더되어 있고, 이제 큰 화면에서도 좋아 보여야 합니다. 방법은 두 가지입니다. 완성된 클립을 영상 업스케일러에 넣거나, 영상 모델로 돌아가 같은 장면을 모델이 제공하는 최고 해상도로 다시 렌더하는 것입니다. 같은 곳으로 가는 두 길처럼 들리지만 그렇지 않습니다. 하나는 지금의 테이크를 지키면서 다듬고, 다른 하나는 지금의 테이크를 더 선명하지만 움직임이 달라질 수 있는 새 테이크와 맞바꿉니다.

이 글은 그 결정을 질문 하나씩 따라가며 정리합니다. 짧게 말하면, 잃을 수 없는 것이 움직임이라면 업스케일하세요. 잘못된 것이 디테일이라면 다시 렌더하세요.

두 길이 실제로 하는 일

업스케일러는 프레임을 받아 크게 키우고, 작은 렌더에는 애초에 없던 디테일을 채워 넣습니다. 움직임, 타이밍, 구도, 그리고 운 좋게 생긴 우연까지 모두 그대로 남습니다. 할 수 없는 일은 렌더 과정에서 생긴 문제를 고치는 것입니다. 뒤틀린 손은 그대로 뒤틀린 채 더 선명해질 뿐입니다.

다시 렌더는 영상 모델에게 프롬프트를 바탕으로 장면을 다시 그리게 하는 것으로, 이번에는 그릴 픽셀이 더 많습니다. 디테일이 모델 자체에서 나오므로 업스케일러가 추측한 디테일보다 대개 더 일관됩니다. 하지만 새로운 테이크입니다. 프롬프트, 시드, 첫 프레임이 모두 같아도 해상도가 다르면 움직임이 달라질 수 있습니다.

질문 1: 이 테이크를 잃어도 되나요?

클립이 왜 마음에 드는지 솔직하게 생각해 보세요. 강아지가 딱 맞는 박자에 고개를 돌리는 순간이나, 연기가 한 번 말려 올라갔다가 가라앉는 모습이라면 그건 운이고, 운은 다시 렌더하면 살아남지 못합니다. 업스케일하세요. 마음에 드는 것이 아이디어, 구도, 빛이고 움직임은 그저 괜찮은 정도라면, 다시 렌더해도 아쉬울 것이 없습니다.

그래서 초안, 고정, 마무리 워크플로는 저렴한 초안에서 움직임을 먼저 찾고, 그다음에야 최종본을 최고 품질로 렌더합니다. 미리 계획했다면 다시 렌더하는 것이 곧 마무리입니다. 업스케일은 남길 계획이 없던 클립을 구해 내는 방법입니다.

질문 2: 얼굴이 얼마나 큰가요?

이런 판단에서는 무엇보다 얼굴이 결정적입니다. 작은 렌더에서도 화면의 삼분의 일을 채우는 얼굴은 진짜 얼굴이 될 만큼 픽셀이 충분해서 업스케일러가 잘 선명하게 만들어 줍니다. 와이드 샷 속 얼굴은 겨우 몇 픽셀일 수 있어서 눈과 입이 뭉개져 있습니다. 업스케일러는 그 얼굴을 지어내야 하고, 프레임마다 조금씩 다른 얼굴을 지어낼 수 있어서 인물이 움직일 때마다 달라 보이게 됩니다.

경험칙으로, 클로즈업은 업스케일이 잘 되고 와이드 샷 속 작은 얼굴은 다시 렌더해야 합니다. 다시 렌더해도 얼굴이 계속 무너진다면 더 가깝게 프레이밍하세요. 렌즈와 초점 가이드에 더 타이트한 샷을 위한 단어가 있습니다.

질문 3: 깜빡이나요?

결정하기 전에 작은 렌더를 전체 화면으로 보고 머리카락, 풀, 천, 물, 벽돌 같은 미세한 질감을 살펴보세요. 그 질감이 이미 꿈틀거리거나 아른거린다면, 업스케일러는 그 아른거림을 더 크고 선명하게 만들고, 크리에이티브 업스케일러는 그 위에 자기만의 아른거림을 더할 수도 있습니다. 지어낸 디테일은 프레임마다 새로 지어내기 때문입니다. 더 높은 해상도로 다시 렌더하면 모델이 그 질감을 제대로 그릴 여유가 생기고, 꿈틀거림이 사라지는 경우가 많습니다.

클립이 차분하고 질감이 안정적이라면 업스케일해도 안전합니다. 피부, 글자처럼 보이는 무늬, 반복되는 표면이 있는 장면이라면 크리에이티브 설정보다 원본에 충실한 설정을 고르세요.

질문 4: 각각 비용은 얼마인가요?

두 길 모두 클립 길이에 따라 가격이 매겨지므로, 클립이 길수록 어느 쪽이든 더 비쌉니다. 차이는 그 밖에 무엇이 가격을 움직이느냐입니다. 최고 해상도로 다시 렌더하는 것은 보통 그 클립을 만드는 가장 비싼 방법이고, 움직임이 다시 맞아떨어질 때까지 여러 번 시도해야 할 수도 있습니다. 업스케일은 이미 가진 클립에 한 번 돌리는 작업이고, 가격은 요청한 목표 크기에 따라 달라집니다. 모든 모델은 실행 전에 생성 버튼에 현재 설정 기준 가격을 보여 주므로, 짐작하지 말고 실제 클립에 대한 두 견적을 비교하세요.

가장 저렴한 경로는 대개 두 방법을 섞는 것입니다. 움직임이 맞을 때까지 작게 초안을 만든 다음, 최고 해상도로 한 번 다시 렌더하세요. 테이크를 대체할 수 없거나 사용한 모델에 더 큰 크기가 없을 때 업스케일러를 꺼내 드세요.

카탈로그의 영상 업스케일러

카탈로그에는 완성된 영상을 받아 더 큰 영상으로 돌려주는 모델이 다섯 개 있습니다. 주로 얼마나 많은 제어권을 주느냐가 다릅니다.

  • [FLUX Video Upscale](/models/black-forest-labs/flux-3/video-upscale)에는 원본에 충실한 업스케일과 크리에이티브 업스케일을 오가는 스위치, 배율, 그리고 새 디테일을 이끄는 선택적 프롬프트가 있습니다. 중립적인 업스케일을 원하면 프롬프트를 비워 두세요.
  • [Fibo Video Upscaler](/models/bria/fibo/video-upscaler)는 목표 해상도와 출력 형식을 고를 수 있고, 편집하기 좋은 컨테이너도 포함되어 있어 클립을 다음에 영상 편집기로 가져갈 때 유용합니다.
  • [Crystal Video Upscaler](/models/clarity-ai/crystal-video-upscaler)는 목표 크기를 메가픽셀 단위로 받으므로, 납품 사양이 이름 붙은 해상도가 아니라 픽셀 수일 때 편리합니다.
  • [Video Upscaler](/models)는 짧은 목표 해상도 목록을 제공하며, 단순히 해상도만 올리고 싶을 때 간편한 선택입니다.
  • [Upscale V1](/models/runwayml/upscale-v1)에는 설정이 전혀 없습니다. 클립을 올리면 더 크게 돌려받습니다.

모델마다 입력 클립의 최대 길이에 제한이 있고, 그 제한은 서로 다릅니다. 긴 클립을 올리기 전에 모델 페이지를 확인하거나 클립을 여러 부분으로 나누세요.

프롬프트
자연스러운 피부 질감, 한 올 한 올 살아 있는 머리카락, 부드러운 필름 그레인, 원래 색감과 조명 유지, 추가되는 사물 없음.
크리에이티브 업스케일의 선택적 프롬프트용: 질감만 묘사하고 새로운 내용은 절대 넣지 마세요.

다시 렌더한다면

그 테이크를 만든 모든 것을 유지하세요. 한 글자도 바꾸지 않은 같은 프롬프트, 모델에 시드가 있다면 같은 시드, 이미지 투 비디오 모델이라면 같은 첫 프레임입니다. Kling V4.0 이미지 투 비디오는 마지막 프레임도 받아서 샷이 끝나는 지점을 고정할 수 있습니다. 그런 다음 해상도만 바꾸세요. 새 테이크가 어긋난다면 마음에 들었던 움직임을 쉬운 말로 프롬프트에 적어, 더는 운에 기대지 않게 하세요.

프롬프트
이전과 같은 샷: 새벽, 붉은 여우가 키 큰 풀숲에서 걸어 나와 멈춰 서고, 한 번의 느린 동작으로 고개를 카메라 쪽으로 돌린다. 카메라 고정, 로우 앵글, 여우 뒤로 안개. 실시간, 자연스러운 속도.
마음에 들었던 박자를 글로 적은 것: 멈춤과 단 한 번의 고개 돌림.

두 길 모두 할 수 없는 일

업스케일러는 프레임이 아니라 픽셀을 더합니다. 끊기는 움직임을 부드럽게 하거나, 클립을 느리게 하거나, 길게 만들지 못합니다. 속도는 렌더 시점에 정해지며 타이밍 단어 가이드에서 다룹니다. 또한 좋은 클립 속 나쁜 프레임 하나를 고치는 것도 두 길 모두 할 수 없습니다. 여기에는 프레임 단위 리터칭이 없습니다. 그리고 어떤 업스케일러도 작은 렌더가 애초에 그리지 않은 얼굴이나 로고를 되살릴 수 없고, 추측할 수 있을 뿐입니다.

자주 묻는 질문

AI 영상을 업스케일하는 것이 다시 렌더하는 것보다 저렴한가요?

대개 그렇습니다. 이미 가진 클립에 한 번 돌리는 작업인 반면, 최고 해상도로 다시 렌더하려면 여러 번 시도해야 할 수도 있기 때문입니다. 둘 다 클립 길이에 따라 늘어나며, 어느 쪽을 실행하든 그 전에 생성 버튼이 클립의 가격을 보여 줍니다.

업스케일한 뒤 얼굴이 프레임마다 다르게 보이는 이유는 무엇인가요?

원본에서 얼굴이 너무 작아 업스케일러가 읽어 내지 못했고, 그래서 디테일을 프레임마다 조금씩 다르게 지어냈기 때문입니다. 원본에 충실한 설정을 쓰거나, 얼굴을 화면에 더 크게 잡아 다시 렌더하세요.

업스케일러로 깜빡임을 고칠 수 있나요?

아니요. 깜빡임까지 포함해 있는 그대로를 키우며, 크리에이티브 업스케일은 깜빡임을 더할 수도 있습니다. 미세한 질감의 깜빡임은 더 높은 해상도로 다시 렌더하거나 프롬프트에서 질감을 단순하게 바꾸는 편이 낫습니다.

#영상#업스케일#워크플로