영상 스케일링(Scaling)은 영상을 확대하거나 축소하는 과정이다. 아나몰픽(Anamorphic), 레터박스(Letterbox), 필러박스(Pillarbox), 크롭(Crop) 방식의 동작 원리와 장단점을 비교하고, 화면 왜곡과 구도 손실, 자막·고지 문구의 시인성 저하 등 잘못된 스케일링이 콘텐츠의 완성도와 시청 경험에 미치는 영향을 살펴본다.
스케일링이 필요한 이유
방송 시스템에서 영상 콘텐츠의 화면 크기를 변경하는 것은 필수적인 과정 중 하나이다. 특히 아직도 진행 중인 과거, HD 전환기에는 기존의 SD 콘텐츠를 HD 채널에 사용하기 위해 업스케일링/업컨버팅(Up-scaling/Up-converting)해야 하는 경우가 많았다.
HD 방송이 보편화된 요즘에는 HD 신호를 아직도 살아 있는 SD 시스템에서 사용하기 위해 다운스케일링/다운컨버팅(Down-scaling/Down-converting)하는 경우가 많다. 물론 UHD 콘텐츠를 HD 규격으로 컨버팅하는 경우도 많다.
전통적인 TV 방송뿐만 아니라 OTT 영역에서도 화면의 크기를 변경하는 기능은 필요하다. 아니, 오히려 더 중요해졌다. 사용자 기기의 화면 해상도와 종횡비가 다양해지면서 하나의 출력 규격만으로 모든 환경에 대응하기 어려워졌고, 사용자의 네트워크 상태와 재생 환경에 적합하도록 해상도와 비트레이트가 다른 여러 품질의 콘텐츠를 제공해야 하기 때문이다.
스케일링 방법
영상의 크기를 변경하는 방법은 크게 3가지 방법이 있다. 각각의 방식이 어떤 방법을 사용해 영상의 크기를 조정하는지 Grass Valley XVP-1801 비디오 프로세서(이하 1801)의 설정 화면과 함께 알아보겠다. 이 장비는 방송 인프라 장비 중 하나로, HD-SDI 신호를 입력받아 여러 가지 처리를 해 주는 장비이다. 독자 제위께서는 설정 화면의 모든 부분을 다 볼 필요는 없고, Input과 Output에서 보이는 그림이 어떻게 변하는지 주의 깊게 살펴보면 되시겠다.
아나몰픽(Anamorphic)
아나몰픽(Anamorphic)은 스트레치(Stretch) 방식이라 불리기도 한다. 원본 영상의 종횡비를 유지하지 않고, 설정된 출력 해상도와 화면 비율에 맞도록 영상을 가로와 세로 방향으로 잡아 늘리거나 찌그러뜨려 출력하는 방식이다. 출력 화면 전체를 빈 영역 없이 채울 수 있지만, 인물과 사물의 형태까지 왜곡되므로, 원본 영상의 구도와 비율을 보존해야 하는 경우에는 적합하지 않다.
1801의 설정 화면에서는 1920×1080 16:9 HD 입력 영상을 720×480 4:3 SD 영상으로 변환하고 있다. 이 과정에서 가로 방향이 세로 방향보다 더 많이 축소되므로, 입력 화면에서 동그란 원이었던 도형은 세로로 긴 타원으로 변하고 정사각형도 폭이 좁은 직사각형으로 찌그러진다. 반대로 4:3 영상을 16:9 화면에 맞춰 아나몰픽 방식으로 변환하면 가로 방향으로 늘어나면서 원은 옆으로 넓은 타원으로, 정사각형은 폭이 넓은 직사각형으로 변형된다.
레터박스(Letterbox) / 필러박스(Pillarbox)
레터박스(Letterbox)는 원본 영상의 종횡비를 유지하면서 전체 영상을 출력 화면 안에 맞추고, 위아래에 남는 영역을 검은색으로 채우는 방법을 의미한다. 화면 가운데 표시되는 영상의 모습이 가로로 길고 세로로 좁은 편지 투입구(Letter box)를 닮아 이런 이름이 붙었다.
1801의 설정 화면을 보면 1920×1080 16:9 HD 입력 영상 전체를 720×480 4:3 SD 출력 화면 안에 배치하고 있다. 출력 화면의 원과 사각형은 입력 화면과 동일한 종횡비를 유지하므로 형태가 왜곡되지 않지만 실제 영상이 표시되는 크기가 줄어들고 위아래에 남는 영역이 생긴다. 레터박스는 이 영역을 검은색으로 채운다.
반대로 원본의 가로 폭이 출력보다 상대적으로 좁아 좌우에 검은 영역이 생기는 것을 필러박스(Pillarbox)라고 한다. 대표적으로 4:3 SD 영상을 16:9 HD 화면에 원본 종횡비 그대로 표시하면 화면 좌우에 필러박스가 생긴다.
영화나 방송 콘텐츠의 종횡비가 TV 또는 재생 화면과 맞지 않을 때 레터박스나 필러박스를 사용하면 원본 화면을 왜곡하지 않고 전체 구도를 보존할 수 있다. 다만 디스플레이가 작으면 사용되지 않는 영역만큼 실제 영상도 작아져 가뜩이나 작은 화면이 더욱 작고 답답하게 보일 수 있다.
HD 전환이 한참 이루어지던 시절, TV나 셋탑박스가 레터박스로 스케일링하는 경우가 자주 있었다. 때문에 화면이 작게 나온다는 민원을 자주 받곤 했다. (제발 플랫폼이나 TV 제조사에 문의하시라구요 ㅜㅜ)
크롭(Crop)
크롭(Crop)은 화면의 일부를 잘라내어 종횡비를 맞추는 방식이다. 원본 영상의 비율을 강제로 변형하지 않고도 출력 화면을 가득 채울 수 있지만, 출력 영역 밖으로 잘려 나간 부분은 그냥 날려버리는 방식이다.
1801의 설정 화면을 보면 16:9 입력 영상의 좌우에 파란색으로 표시된 크롭 영역이 보인다. 이 영역을 출력에서 제외하고 가운데 부분만 사용하는 것이다. 출력의 원은 형태가 왜곡되지 않은 채 크게 표시되지만, 입력 좌우에 있던 도형과 파란색 영역은 출력에서 사라진다.
크롭은 검은 여백 없이 화면을 가득 채울 수 있지만 잘려 나간 영역은 표시되지 않는다. 따라서 크롭 영역을 결정할 때는 화면의 주요 피사체와 자막 안전 영역이 출력 범위 안에 남아 있는지 반드시 확인해야 한다. (예전에 이렇게 숨겨진 1인치를 보여줄 수 있다는 TV 제품도 인기를 끈 적이 있다. 크롭 때문은 아니었지만…)
스케일링 방법을 알아야 하는 이유
현대의 미디어 환경에서는 스케일링 방법이 그다지 중요하지 않게 여겨지기 쉽다. SD에서 HD로 전환하던 시기에는 달라지는 화면 비율을 함께 고민해야 했지만, HD 이후로는 대부분 16:9를 사용하기 때문에 고민할 필요가 매우 적어졌다. OTT 환경에서도 대부분의 플레이어가 영상과 재생 화면의 비율을 비교해 자동으로 화면 크기를 조정한다. 이 때문에 스케일링 방법을 굳이 자세히 알 필요가 없어 보이는 것도 사실이다.
하지만 제작 환경에서는 16:9뿐만 아니라 다양한 화면 비율이 사용되고 있으며, 플레이어가 자동으로 화면을 조정한다는 것은 스케일링 문제가 사라졌다는 뜻이 아니라, 플레이어가 화면 맞춤, 크롭 또는 스트레치 중 하나를 대신 선택한다는 의미이다. 따라서 콘텐츠를 제작하고 기획하거나 송출하고 전송하는 엔지니어라면 각 스케일링 방식이 최종 화면에 미치는 영향을 정확히 알고 있어야 한다.
시청 경험의 저하
화면의 왜곡은 시청자의 집중을 방해하고 지속적인 어색함을 줄 수 있다. 더 나아가 화면이 왜곡되는 정도가 커질수록 시청자에게 피로감, 두통, 정서적 불편감 등이 발생한다는 주장도 있다.[1] 적절하지 못한 스케일링은 화면의 자연스러움과 콘텐츠의 완성도를 떨어뜨리며, 시청 만족도를 낮추고 콘텐츠 이탈이라는 현실적 문제를 만들 수 있다.
부가 요소의 시인성
화면에 자막이 번인(Burn-in, 영상 자체에 그래픽 요소로 합성된 방식)되어 있거나 각종 고지 문구가 표시된 경우, 스케일링 방법은 부가 요소의 시인성과 콘텐츠의 완성도에 직접적인 영향을 미친다. 특히 국내 콘텐츠는 영상 내에 자막을 적극적으로 삽입하는 방향으로 변화하고 있다. 화면에 표시된 문자를 정확하게 인식하는 것이 콘텐츠를 온전히 즐기기 위한 중요한 요소 중 하나가 되었다는 것을 고려하면, 스케일링 과정을 통해 자막 문구의 일부가 잘려 나가거나 형태가 왜곡되는 것은 콘텐츠 품질의 직접적인 하락을 의미한다.
다중 플랫폼 대응
아무리 최종 클라이언트가 디스플레이 이미지를 제어한다고는 하지만, 입력받는 소스의 품질을 넘어설 수 없다. 때문에 각 플랫폼에 적합한 스케일링 전략이 필요하다. 특히 적응형 비트레이트(Adaptive Bitrate, ABR) 스트리밍을 위해 해상도와 비트레이트가 서로 다른 여러 출력본을 구성하는 OTT 환경이라면 스케일링은 단순 변환이 아닌, 시청 경험 최적화를 위해 고려해야만 하는 중요 팩터 중 하나이다.
마무리
제작자와 엔지니어 및 기획자는 플랫폼과 기기의 특성에 맞는 최적의 스케일링 방식을 이해하고 이에 맞춰 대응할 수 있어야 한다. 특히 OTT 환경에서는 네트워크 상황과 기기 해상도에 따라 유동적으로 해상도와 비율을 조절하는 전략이 시청 경험의 중요한 요소 중 하나이다.
고로, 영상의 크기 조정은 생각보다 신중한 전략을 가지고 접근해야 할 문제임과 동시에, 시청자 만족도와 서비스 품질에 직접적인 영향을 줄 수 있음을 기억해야 한다.
FAQ
- 영상 스케일링이란 무엇인가?
- 영상 스케일링은 영상의 크기를 확대하거나 축소하는 처리 과정이다. 원본과 출력 영상의 화면비가 다르면 아나몰픽, 레터박스 또는 크롭과 같은 방식으로 화면을 구성하게 된다.
- 영상 스케일링이 필요한 이유는?
- 원본 영상과 방송·스트리밍 시스템, 재생 장치에서 요구하는 해상도와 화면비가 서로 다를 수 있기 때문이다. 하나의 영상을 SD, HD, UHD 또는 여러 스트리밍 화질로 변환할 때 스케일링이 필요하며, 올바르게 처리해야 원본의 구도와 자막을 보존할 수 있다.
- 아나몰픽(Anamorphic) 방식이란?
- 영상을 잡아 늘리거나 줄이는 방식이다. 이 경우 인물과 그래픽의 형태가 왜곡될 수 있다.
- 레터박스(Letterbox) 방식이란?
- 원본 화면비와 전체 영상을 유지하면서 출력 화면 안에 맞도록 확대하거나 축소하는 방식이다. 출력 화면과 비율이 맞지 않아 생기는 위아래 여백은 검은색으로 채운다. 좌우에 여백이 생기는 형태는 필러박스(Pillarbox)라고 한다.
- 크롭(Crop) 방식이란?
- 원본 화면비를 유지하면서 출력 화면을 가득 채우도록 영상을 확대하고, 출력 영역을 벗어난 부분을 잘라내는 방식이다. 화면 왜곡은 발생하지 않지만 가장자리의 인물, 자막 또는 그래픽이 사라질 수 있다.
- 해상도와 화면비는 같은 개념인가?
- 같은 개념이 아니다. 해상도는 영상을 구성하는 가로와 세로의 픽셀 수이고, 화면비는 영상이 실제로 표시되는 가로와 세로의 비율이다. 특히 SD 영상은 정사각형이 아닌 픽셀을 사용할 수 있어 같은 해상도라도 서로 다른 화면비로 표시될 수 있다.
참고 자료
갱신 내역
- — 최초 게시
- — 1차 수정
- — 2차 수정 및 주소 이전
