실시간 통신, 미디어 처리, AI 통합에 대한 심층 분석.
Agora SDK를 중심으로 프로덕션 레벨의 구현을 다룹니다.
primary 카테고리 또는 태그로 Fundamentals에 속한 글을 모두 표시합니다.
B-frame은 왜 미래를 알고 있는가? 인코더 버퍼링의 실체, STEP 1~5로 따라가는 인코딩 흐름, '기분 문자 메시지' 비유, I:P:B = 100:40:20 압축 효율, GOP 구조, 재배열 ≠ 끊김, 1시간 영화 28GB 절약의 수학적 근거, VOD ✅ / WebRTC ❌ 사용 범위에 Bonus로 'B-frame은 오디오와 관계 있나?'(Opus 블록, 립싱크 간접 경로)까지.
아날로그 TV의 Interlaced 비월 주사에서 디지털 Progressive로, 720p의 p의 정체, I/P/B-frame 용량 차이(100:15:8), WebRTC가 I+P만 쓰는 구조적 이유, GOP 길이 트레이드오프, PLI/FIR RTCP 피드백 루프, B-frame의 양방향 참조 그물망이 장애 복구를 어렵게 만드는 방식, 전송 순서 ≠ 표시 순서로 발생하는 look-ahead 지연까지 다이어그램으로 정리.
ADC→PCM→전처리(AEC/AGC/NS)→Opus 인코딩→RTP→UDP→Jitter Buffer→디코딩→DAC→스피커. 코덱 선택(Opus/µ-law/AAC/MP3) 의사결정 트리, WebRTC·Agora SD-RTN 흐름, 인코딩·트랜스코딩·패키징 차이까지.
PCM은 사진 RAW 같은 인코딩 방식이고 WAV는 컨테이너. Linear PCM vs µ-law 차이, fmt chunk 읽는 법, sample rate·channel·bit depth 틀리면 깨지는 이유, 브라우저 PCM 재생(AudioContext), WAV→MP3 ffmpeg 변환까지.
마이크가 공기 진동을 전기로 바꾸는 원리, ADC의 샘플링과 양자화, PCM 원본 데이터, MP3 심리음향 압축(주파수/시간 마스킹), 디코딩과 DAC, 스피커가 숫자를 소리로 바꾸는 전체 과정.
컴퓨터 안에서 소리는 숫자이고, 숫자를 텍스트로 옮기는 규칙이 base64. MP3 파일 구조, 6비트씩 자르는 이유, 33% 용량 증가의 원리, Buffer와 Uint8Array 차이까지.