在 Silverlight 应用程序中实现对 FLV 视频格式的支持

如何解码 FLV 文件中的 AAC 音频流？

要想 Silverlight 对 AAC 音频流进行解码，必须先让 Silverlight 知道用哪个解码器才能对 AAC 音频流进行解码。

下面的代码完成了这个工作，其中 MediaStreamAttributeKeys.CodecPrivateData 是重点所在，它是通过计算 WaveFormatExtensible 结构得到的。

WaveFormatExtensible 结构的值来自于 AUDIOTAG 的 AUDIODATA 结构（见第6页）。下面的代码为了方便说明，直接进行了赋值。

protected override void OpenMediaAsync()
{
    WaveFormatExtensible wfx = new WaveFormatExtensible();
    wfx.FormatTag = 0x00FF; // AAC=0x00FF; MP3=0x0055; ADPCM=0x5346; PCM=0x0001
    wfx.Channels = 2;
    wfx.BlockAlign = 8;
    wfx.BitsPerSample = 16;
    wfx.SamplesPerSec = 44100;
    wfx.AverageBytesPerSecond = wfx.SamplesPerSec * wfx.Channels * wfx.BitsPerSample / wfx.BlockAlign;
    wfx.Size = 0;
    string codecPrivateData = wfx.ToHexString();

    Dictionary<MediaStreamAttributeKeys, string> audioStreamAttributes = new Dictionary<MediaStreamAttributeKeys, string>();
    audioStreamAttributes[MediaStreamAttributeKeys.CodecPrivateData] = codecPrivateData; // 管线需要正确初始化和呈现的编码解码器数据。对于视频，这是标头信息。对于音频，这是 base16 编码的 WaveFormatEx 结构。
    this.audioStreamDescription = new MediaStreamDescription(MediaStreamType.Audio, audioStreamAttributes); // 详尽描述媒体流，以便初始化 MediaElement 和基础媒体管线。

    Dictionary<MediaSourceAttributesKeys, string> mediaSourceAttributes = new Dictionary<MediaSourceAttributesKeys, string>();
    mediaSourceAttributes[MediaSourceAttributesKeys.Duration] = "0"; // 源的整数形式的播放时间长度，以 100 纳秒为增量单位（TimeSpan 结构的值的计时周期数）。

    List<MediaStreamDescription> mediaStreamDescriptions = new List<MediaStreamDescription>();
    mediaStreamDescriptions.Add(this.audioStreamDescription);

    this.ReportOpenMediaCompleted(mediaSourceAttributes, mediaStreamDescriptions); // 向 MediaStreamSource 附加到的 MediaElement 报告媒体已打开并且 MediaStreamSource 具有其所包含的内容流的说明。
}

之后 Silverlight 会调用 GetSampleAsync 方法获得 AAC 音频流的 MediaStreamSample 实例。实例化 AAC 音频流的 MediaStreamSample 很简单，只要将 FLV 文件中 AUDIOTAG 的 AUDIODATA 的 AACAUDIODATA 的 Data（Raw AAC frame）交给 MediaStreamSample 就行了。

注意！FLV 文件中第一个 AUDIOTAG 的 AUDIODATA 的 AACAUDIODATA 的 Data 总是 AudioSpecificConfig（在 ISO/IEC 14496-3 中定义），解码的时候注意跳过这个 AUDIOTAG。

protected override void OpenMediaAsync()
{
    Dictionary<MediaStreamAttributeKeys, string> videoStreamAttributes = new Dictionary<MediaStreamAttributeKeys, string>();
    videoStreamAttributes[MediaStreamAttributeKeys.VideoFourCC] = "H264"; // 实例化视频编码解码器所需的数据。这是一个由四个字符构成的值，也称作 FourCC。
    this.videoStreamDescription = new MediaStreamDescription(MediaStreamType.Video, videoStreamAttributes);

    Dictionary<MediaSourceAttributesKeys, string> mediaSourceAttributes = new Dictionary<MediaSourceAttributesKeys, string>();
    mediaSourceAttributes[MediaSourceAttributesKeys.Duration] = "0";

    List<MediaStreamDescription> mediaStreamDescriptions = new List<MediaStreamDescription>();
    mediaStreamDescriptions.Add(this.videoStreamDescription);

    this.ReportOpenMediaCompleted(mediaSourceAttributes, mediaStreamDescriptions);
}