다른 라이브 스트림의 오디오와 비디오를 결합하는 방법

하나의 비디오에 여러 오디오를 먹싱하는 시나리오

하나의 공통 비디오 스트림에 여러 오디오 스트림을 결합하는 경우, 언어마다 전체 스트림을 별도로 제작하는 것보다 인코딩 자원과 운영 비용을 줄일 수 있다. 특히 비디오 스트림은 오디오 스트림에 비해 인코딩 자원이 많이 필요하기 때문에 시스템 자원을 효과적으로 절약할 수 있다.

다국어 동시통역

국제 행사, 종교 행사, 기자회견과 스포츠 중계 등에서 하나의 비디오 스트림에 언어별 통역 오디오를 각각 결합해 여러 개의 언어별 라이브 스트림을 생성한다.

화면 해설

시각장애인을 위한 화면 해설 음성을 원본 비디오와 결합해 별도의 화면 해설용 스트림을 생성한다.

일반 중계와 해설 선택형 중계

같은 스포츠 경기나 공연 영상에 현장음, 전문 해설, 응원팀별 해설 또는 출연자별 해설 오디오 스트림을 결합해 여러 종류의 스트림을 생성한다.

음향 선택형 콘텐츠

보컬 중심, 악기 중심, 현장 소리 강조 등 서로 다른 오디오 믹스를 하나의 비디오에 연결해, 시청자가 선호하는 음원을 선택할 수 있게 한다.

장르별 음악 스트리밍

같은 영상에 팝, 클래식, 재즈 또는 앰비언트 등 서로 다른 음악 장르의 오디오를 결합해 여러 분위기의 라이브 채널을 구성한다.

교육·훈련용 음성 교체

하나의 교육 영상에 초급자용 설명, 전문가용 설명, 어린이용 설명 또는 시험 대비용 해설을 각각 결합해 학습 수준별 스트림을 제공한다.

여러 비디오에 하나의 오디오 스트림을 적용하는 시나리오

360도 VR 및 CCTV

어느 한 지점을 여러 각도에서 관찰하거나, 한 지점에서 여러 각도의 방향을 관찰하는 경우, 모든 비디오 스트림에 동일한 오디오를 적용시켜 현실감 있는 서비스를 제공할 수 있다.

멀티 앵글 스트리밍

다양한 시점(예: 무대 정면, 드러머 카메라, 골키퍼 뷰 등)의 비디오 스트림에 동일한 현장 오디오를 결합하면, 시청자가 원하는 각도의 영상을 선택할 수 있게 된다.

온라인 강의

여러 시점(정면, 칠판, 클로즈업 등)에서 촬영된 비디오 스트림에 동일한 현장 오디오를 적용해 학습자가 시점을 자유롭게 선택할 수 있게 한다.

POV 스트리밍

여러 플레이어의 시점(POV) 화면이나 게임 내 다양한 관전 화면에 동일한 오디오를 적용해 원하는 선수의 플레이를 선택해 볼 수 있게 한다.

ModuleAVMix 모듈 다운로드와 설치

1. 와우자 스트리밍 엔진 확장 모듈 중 하나인 ModuleAVMix 모듈을 찾아 다운로드받는다.
2. 와우자 스트리밍 엔진 확장 모듈 설치 방법을 참고해 다운로드한 압축 파일을 해제하고, 패키지의 JAR 파일을 와우자 설치 디렉토리의 lib 디렉토리에 복사한다.
3. 와우자 스트리밍 엔진 확장 모듈 적용 방법을 참고해 모듈을 사용할 어플리케이션의 Application.xml의 Module 섹션에 모듈 정보를 등록해 준다.

   모듈 등록 정보

   Name	Description	Fully Qualified Class Name
   ModuleAVMix	AV 먹스	com.wowza.wms.plugin.avmix.ModuleAVMix

   <Module>
     <Name>ModuleAVMix</Name>
     <Description>AV 먹스</Description>
     <Class>com.wowza.wms.plugin.avmix.ModuleAVMix</Class>
   </Module>

4. 와우자 서비스를 재시작해 준다. 새로운 JAR 파일을 설치했기 때문에 어플리케이션만 재시작해 주면 모듈 적재가 되지 않는다.

모듈 적용

설치한 모듈을 사용하기 위해서는 관련 프로퍼티를 입력해 주어야 한다. 프로퍼티 입력 방법을 참고하여 모듈을 사용할 어플리케이션에 프로퍼티를 추가해 준다.

<Property>
  <Name>avMixNames</Name>
  <Value>outputName: MUXED, videoName: CamRTSP1, audioName: MusicBox</Value>
  <Type>String</Type>
</Property>

avMixNames의 Value

ModuleAVMix의 핵심 프로퍼티인 avMixNames는 키-값 형태로 다음과 같이 구성된다.

outputName

ModuleAVMix를 통해 생성할 출력 스트림의 이름

필수 항목으로 반드시 입력해 주어야 한다.

videoName

비디오 소스로 사용할 스트림 이름

없을 경우 출력 스트림은 비디오 없는 스트림으로 생성

audioName

오디오 소스로 사용할 스트림 이름

없을 경우 출력 스트림은 오디오 없는 스트림으로 생성

최종적으로 위 예시에서 사용한 Value 값인 outputName: MUXED, videoName: CamRTSP1, audioName: MusicBox는 CamRTSP1 스트림의 비디오와 MusicBox 스트림의 오디오를 결합해 MUXED라는 새로운 스트림을 생성한다.

위의 필수 속성을 포함해 추가 옵션으로 사용할 수 있는 프로퍼티 목록은 와우자 공식 문서를 참고하기 바란다.

프로퍼티를 저장한 후 해당 어플리케이션을 재시작하면 설정이 적용된다.