DirectShow学习
+ -

DirectShow 时间戳

2021-02-26 159 0

时间戳定义媒体样本的开始和完成时间,以流时间为单位。时间戳有时称为渲染时间。阅读本文其余部分时,重要的是要记住,并非所有格式都以相同的方式使用时间戳。例如,并非所有MPEG样本都带有时间戳。在MPEG滤波器图中,时间戳不应用于每一帧,直到它们从解码器输出。

渲染器过滤器接收到Sample时,会根据时间戳安排渲染。如果样本延迟到达,或者没有时间戳,过滤器会立即呈现样本。否则,过滤器将等待Sample的开始时间,然后再渲染Sample。(它通过调用ireferencelock::advisiontime方法等待开始时间。)

源过滤器和解析器过滤器负责在它们处理的Sample上设置正确的时间戳。使用以下准则。

  • 文件回放:第一个样本带有时间戳,开始时间为零。随后的时间戳由采样长度和回放速率决定,而回放速率本身由文件格式决定。解析文件的过滤器负责计算正确的时间戳(例如,AVI拆分器)。
  • 视频和音频捕获:每个样本都有一个时间戳,其开始时间等于捕获时的流时间,注意如下:
    • 来自预览插针(与捕获插针相反)的视频帧没有时间戳。由于图形延迟的原因,带有捕获时间戳的视频帧在视频渲染器中总是延迟到达。这可能会导致渲染器为了进行质量控制而丢弃帧。有关质量控制的信息,请参阅质量控制管理。
    • 音频捕获:音频捕获过滤器使用自己的一组缓冲区,这些缓冲区与音频驱动程序使用的缓冲区是分开的。音频驱动程序以固定的间隔填充捕获过滤器的缓冲区。间隔取决于驱动程序,但一般不超过10毫秒。音频样本上的时间戳反映了驱动程序填充音频捕获过滤器缓冲区的时间。这些时间可能有点不准确,特别是当应用程序使用非常小的缓冲区时。然而,媒体时间将准确地反映缓冲区中音频样本的数量。
  • Mux过滤器:根据输出格式,Mux过滤器可能需要生成时间戳,也可能不需要。例如,AVI文件格式使用没有时间戳的固定帧速率,因此AVI Mux过滤器假设样本到达的时间大致正确。但是,如果传入的时间戳显示的间隔大于一帧,则AVI Mux将写入一个大小为零的索引项,以指示丢弃的帧。在文件回放时,在运行时生成新的时间戳,如前所述。
    要设置样本的时间戳,请调用IMediaSample::SetTime方法。

媒体时间

过滤器还可以为Sample指定媒体时间。在视频流中,媒体时间表示帧编号。在音频流中,媒体时间表示数据包中的Sample号。例如,如果每个分组包含1秒的44.1千赫(kHz)音频,则第一分组具有0的媒体开始时间和44100的媒体停止时间。在可查找的流中,媒体时间总是相对于流的开始时间。例如,假设您从一个每秒15帧的视频流开始寻找2秒。则第一个媒体样本的时间戳为0,但媒体时间为30。

渲染器和mux过滤器可以通过检查间隙来使用媒体时间来确定帧或采样是否已被丢弃。但是,设置介质时间不需要过滤器。要设置示例的媒体时间,请调用IMediaSample::SetMediaTime方法。

HID人机交互QQ群:564808376    UAC音频QQ群:218581009    UVC相机QQ群:331552032    BOT&UASP大容量存储QQ群:258159197    STC-USB单片机QQ群:315457461    USB技术交流QQ群2:580684376    USB技术交流QQ群:952873936   

0 篇笔记 写笔记

Directshow获取颜色空间分辨率
void GetColorSpaceResolution(){ HRESULT hr; AM_MEDIA_TYPE *pmt = NULL; VIDEOINFOHEADER *pvi = NULL; VIDEO_STREAM_CONFIG_CAPS scc; IAMSt......
DirectShow时钟时间
DirectShow定义了两个相关的时钟时间:参考时间和流时间。参考时间是参考时钟返回的绝对时间。(见参考时钟。)流时间是相对于图形上次开始运行的时间定义的。图形运行时,流时间等于参考时间减去开始时间。图形暂停时,流时间保持在暂停时的流时间。寻道操作后,流时间重置为零。图形停止时,流时间未定义。当媒......
DirectShow 事件产生
要处理DirectShow事件,应用程序需要一种方法来确定事件何时在队列中等待。过滤器图形管理器提供了两种方法:窗口通知:每当出现新事件时,过滤器图形管理器就会向应用程序窗口发送用户定义的窗口消息。事件信号:如果队列中有DirectShow事件,Filter Graph Manager将向Windo......
DirectShow 图形过滤(Filter)管理器介绍
Filter Graph Manager也是一个COM组件,它是DirectShow的控制中心,它控制Filter的运行。它有以下几个功能:协调各个Filter的状态。Filter有运行,暂停,停止三种状态,在Filter Graph中,各个Filter的状态必须协调一到,否则会引起冲突。Filte......
DirectShow播放UVC设备第二路码流方法
双码流播放Graphi图如上。双码流视频设备有两路捕获输出pin, RenderStream函数只会连接第一路pin,要播放第二路码流需要手动获取第二路pin,然后去连接解码器,再手动连接render,就可以显示了。示例代码// m_pGB 是 IGraphBuilder对象// m_pBF......
DirectShow 体系结构
DirectShow技术是建立在DirectDraw和DirectSound组件基础之上的,它通过DirectDraw对显卡进行控制以显示视频,通过DirectSound对声卡进行控制以播放声音。DirectShow的体系结构如下图所示:DirectShow 位于应用层中。它使用一种叫 Filter......
DirectShow实现视频的实时显示并抓图,可以设置视频参数
DirectShow抓图其实是使用IBasicVideo(IID_IBasicVideo)接口获取数据源,进行存储即可。IGraphBuilder* m_pGraphBuild = NULL;hr = CoCreateInstance(CLSID_FilterGraph, NULL, CLSCTX_......
DirectShow 过滤器之间数据交互
过滤器通过pin连接,连接的两个PIN在在上游过滤器叫做输出pin,下游过滤器的叫做输入pin。数据从上游过滤器传递给下游过滤器通过这两个上游过滤器的输出pin到下游过滤器的输出pin实现。通常,下游过滤器通过IMemInputPin::Receive来接收来自上游过滤器输出pin发送的数据。上下游......
DirectShow数据流
本节介绍DirectShow的数据的工作方式进行介绍。通过滤器之间数据交互一节可知,数据是存在buffer中的。而每个buffer都由一个名为media sample的COM对象包装,该对象实现了IMediaSample接口。Sample由另一种类型的对象(称为分配器)创建的,它由IMemAlloc......
DirectShow 简介
DirectShow是微软Windows操作系统平台关于多媒体架构的一套API接口。使用DirectShow,应用程序可以执行高质量的视频和音频播放或采集。DirectShow提供高质量的多媒体流捕获和播放。它支持多种格式,包括Advanced Systems Format(ASF)、Motion ......
DirectShow Samples和Allocators
在看本节前,我们首先明确2个概念。通过前面的章节可知:Samples是DirectShow各过滤器之间传输的数据的封包。Allocators是用于创建Samples的分配器。本节将详细介绍Allocators和Sample的原理。当一个过滤器通过其输出管脚将多媒体数据传输给另一个过滤器(通过其输入管......
DirectShow 接收事件
过滤器图形管理器公开了三个支持事件通知的接口。IMediaEventSink包含筛选器发布事件的方法。IMediaEvent包含应用程序检索事件的方法。IMediaEventEx继承并扩展IMediaEvent接口。过滤器通过调用Filter Graph Manager上的IMediaEventSi......
DirectShow数据传输协议
DirectShow数据传输协议定义为了进行数据交换,DirectShow的过滤器(filter)必须支持相关的数据传输协议,这个传输的协议叫做transports。当2个图形过滤器的pin相连接后,它们必须支持相同的transports,除非它们进行数据交换。通常,传输要求其中一个管脚支持特定接口......
DirectShow实时源
实时源(也称为推送push源)实时接收数据。示例包括视频捕获和网络广播。通常,活动源无法控制数据到达的速率。如果满足以下任一条件,则筛选器被视为实时源:过滤器从IAMFilterMiscFlags::GetMiscFlags方法返回AM_FILTER_MISC_FLAGS_IS_SOURCE标志,并......
DirectShow 过滤器的状态
过滤器有三种可能的状态:停止、暂停和运行。暂停状态的目的是提示图形中的数据,以便run命令立即响应。过滤器图形管理器控制所有状态转换。当应用程序调用IMediaControl::Run、IMediaControl::Pause或IMediaControl::Stop时,图形过滤管理器会在所有过滤器上......
关注公众号
  • HID人机交互
  • Linux&USB
  • UAC音频
  • TYPE-C
  • USB规范
  • USB大容量存储
  • USB百科
  • USB周边
  • UVC摄像头
  • Windows系统USB
  • 音视频博客
  • 取消
    感谢您的支持,我会继续努力的!
    扫码支持
    扫码打赏,你说多少就多少

    打开支付宝扫一扫,即可进行扫码打赏哦

    您的支持,是我们前进的动力!