C++ PCM data에 관련한 질문입니다.

Question

안녕하세요 초보개발자입니다. C&#43;&#43; 을 이용해서 AV file을 재생하고 이 파일의 PCM 데이터를 추출하고 있습니다. 이 PCM 데이터를 이용해서 Video와 싱크가 맞는 레벨메터를 그려주고 싶습니다..즉 소리가 커지면 레벨메터 수치가 올라가고, 작으면 내려가고 하는 수직 바 형태의 일반적인 사운드미터입니다. 일단 PCM 데이터는 16bit pcm이며 추출을 완료해서 비디오 한프레임 당 Left 192, Right 192개의 PCM 데이터가 나옵니다. 근데 문제는 총 384개의 PCM데이터 중, 어떤 데이터가 비디오 한프레임의 사운드 인지 모르겠습니다..제가 시도해본 건 384개의 데이터의 평균을 구해 출력, 마지막 데이터를 구해 출력 2가지인데둘다 영상과 싱크가 맞지 않습니다. 보통 윈도우에서 제공하는 사운드미터나 각종 영상플레이어등에서 제공하는 사운드미터는어떤 방식으로 PCM 데이터 수치를 출력해주는건가요?

드래고나 · Accepted Answer

PCM 데이터를 어떤 방식으로 뽑고 계시는지 모르겠습니다.사운드 장치에서 직접 캡쳐 한다면 캡쳐한 시점이 프레임의 출력 시간 보다 늦다고 보면 됩니다.PCM 계산등이 이루어 지면 딜레이가 생기게 됩니다. 플레이어를 직접 만들어 디코딩된 데이터를 가져 오시는 것이라면 비디오와 음성 스트림에 pts 값이 있습니다.pts 값으로 동기화를 맞추면 됩니다.

po개발wer · Answer

답변 감사합니다.PCM 데이터는 사운드 장치에서 캡쳐가 이루어지고 있습니다 pts는 타임스탬프를 말씀하시는건가요:?

드래고나 · Answer

네 AV file 이라 뭉뚱 그려서 말씀 하셔서 다를수 있지만 MP4, MOV, MKV, AVI 등 컨테이너 들에는 영상은 프레임마다 음성은 일정 간격으로dts 와 pts 가 있습니다. 그중 pts(play time stamp) 가 음성과 영상 동기화를 위해 쓰입니다. 오디오를 직접 사운드 카드에서 캡쳐하면 pts 등의 타임 스탬프를 가져 오지 못하므로 영상과의 정확한 동기화는 어렵고 영상과 이미 동기화 되어 출력하는 음성을 가져 오는 것이므로 지연이 생길 수 밖에 없습니다.

po개발wer · Answer

감사합니다.. 혹시 PCM 데이터 관련된 질문인데16bit PCM data 최소최대값이 -32768 ~ 32767인데이때 이 데이터를 dBFS값으로 변환한다면 20*log10(abs(pcmData)/32768) 이 식이 맞을까요?

드래고나 · Answer

죄송합니다. 해당 로직은 저도 해본 적이 없습니다.

po개발wer · Answer

답변 정말 감사드립니다 드래고나님

C++ PCM data에 관련한 질문입니다.

6개의 답변

Q&A 목록