音频混音能实现什么3 L1 F" g# R+ a, h/ J
提取一个视频文件的音频轨道，和另一个事先准备好的 mp3 文件混音
/ M3 Z8 N% c/ q' L场景类似于视频剪辑软件的混音操作，将原视频文件和配乐混音，生成新的音频4 j# N$ i0 i9 N) {2 x
& 0xff 的意义9 C5 n" }5 x+ u3 ^! F2 \
6 v* `9 U \# A0 Q- O; S& 与运算，只有两者相同时，该位与的结果才为 1/ Z7 f8 [ i, h
0x 表示 16 进制，0xff 的二进制表示为 1111 1111
0 x8 H& e; D4 F% B: U3 E) D& 0xff 刚好是取当前字节的数值转为二进制，通常搭配移位运算一同服用- B+ {+ {0 m8 F( _) s# J7 Y- H% @
6 n' m1 }/ ]4 _, @混音是怎么实现的9 V3 b, m2 K" G7 L/ a2 Q
9 Y! I% }, W/ b2 N E# N. C
获取两个待混音的文件
+ w$ {( Z. p: r使用 MediaExtractor 提取音频轨道
4 A9 g6 N3 r; _% A6 J- b/ z, K ~使用 MediaCodec 解码成 PCM 裸数据
; L1 y! ?7 C: g对 PCM 的字节数据进行相加( l Z. B4 g) n/ s. z5 V6 |
生成新的音频文件
$ w) H% z: @: f D, }" n* T5 Y3 i* O1 Y
混音是基于 PCM 的基础上，在封装格式的文件无法直接进行音频剪辑、混音等操作+ L; k* e9 L; x: g2 J% Z
使用三个字节数组作为数据暂存区，分别对应着素材1，素材2和待合成的文件，这里又涉及到了不同声道数，量化位数的素材音频混音的兼容问题，需要重采样
! H7 _* o1 w: ?" C& V取素材 1 和素材 2 对应的 pcm 数据进行相加，需要考虑到两个 short 类型的数相加后可能会超过 short 的范围，遇到这种情况时我们直接取 short 的边界
$ O2 G& Q3 p9 v4 k5 ?) Y, E调整素材音频的音量大小时，可能会遇到丢失精度的问题
; r- T6 B7 R$ v- K' |1 {获取音频轨道后，怎样将数据送去解码$ L% b9 b* `3 l$ U0 ~ c G
我们使用 MediaExtractor 获取轨道所在的位置后，通过遍历获取到指定的轨道，然后通过 MediaExtractor.readSampleData() 将轨道数据放到 Buffer 中，此时就需要 MediaCodec 解码了，当拿到空闲的 ByteBuffer 后，将 Buffer 中的数据放到 输入缓冲区中，然后 MediaExtractor 释放上一帧的压缩数据（ MediaExtractor.advance() ）
; a, u( ^- h( V9 a重采样
1 e6 X8 N+ {# ^4 f2 b9 C- y4 k
' b0 m$ u( [5 b( ~* S6 k9 L! K什么是重采样：改变音频文件原本的采样率的过程叫做重采样2 ]$ I' N4 T! m+ s% U _ V
Android 中什么时候需要音频重采样" h! x8 \1 U: S
. t/ c8 A! F; Y) q; D在几个不同采样率的音频文件时，一次只能设置一个采样率，需要统一个值，并且可能不让其他音频失真
/ R" A$ W8 D$ _! P1 V! d% I/ M9 N |
回复
