DeepStream插件Gstreamer（一）：概述

最新推荐文章于 2026-03-27 09:16:47 发布
原创 最新推荐文章于 2026-03-27 09:16:47 发布 · 3k 阅读 · 10
标签
#DeepStream #Gstreamer
本文深入探讨了DeepStream SDK，一个基于GStreamer的框架，用于在NVIDIA Jetson模块和dGPU上开发AI应用。内容涵盖SDK中的元数据结构，如NvDsBatchMeta，以及如何添加用户自定义元数据。此外，还解释了在Gst-nvstreammux之前和之后插入自定义元数据的流程，并着重介绍了DeepStream 5.0中针对跟踪器置信度值的重大变更，包括新的边界框坐标和置信度字段。

一、插件概述

   DeepStream SDK基于GStreamer框架。本手册介绍了DeepStream GStreamer插件以及DeepStream的输入，输出和控制参数。在包含NVIDIA®Jetson™模块或NVIDIA dGPU适配器1的系统上支持DeepStream SDK 。本手册适用于希望使用DeepStream SDK开发DeepStream应用程序或其他插件的工程师。它还包含有关SDK中使用的元数据的信息。开发人员也可以添加自定义元数据。该手册介绍了SDK中定义的用于使用IPlugin实现自定义推理层的方法NVIDIA®TensorRT™的界面。您可以在使用本手册时参考SDK随附的示例示例，以熟悉DeepStream应用程序和插件开发。

二、DeepStream SDK中的元数据

Gst Buffer是GStreamer中数据传输的基本单位。每个Gst缓冲区都有关联的元数据。DeepStream SDK附加了DeepStream元数据对象NvDsBatchMeta，如以下各节所述。

NvDsBatchMeta：基本元数据结构

DeepStream对元数据使用可扩展的标准结构。基本元数据结构NvDsBatchMeta以在Gst-nvstreammux插件内部创建的批处理级元数据开始。辅助元数据结构包含框架，对象，分类器和标签数据。DeepStream还提供了一种在批处理，框架或对象级别添加用户特定的元数据的机制。DeepStream通过附加NvDsBatchMeta结构并将Gst-nvstreammux插件中的GstNvDsMetaType.meta_type设置为NVDS_BATCH_GST_META，将元数据附加到Gst缓冲区。当您的应用处理Gst缓冲区时，它可以遍历附

最低0.47元/天 解锁文章
Gstreamer之GstBuffer(十八)
Android系统攻城狮
03-06 1892
1.GstBuffer结构体定义 gstreamer/gstreamer/gst/gstbuffer.h typedef struct _GstBuffer GstBuffer; /** * GstBuffer: * @mini_object: the parent structure * @pool: pointer to the pool owner of the buffer * @pts: presentation timestamp of the buffer, can be ..
【Deepstream-gst-metadata-test例子解析】
hello_dear_you的博客
12-16 1512
0. 背景介绍 deepstream-gst-metadata-test例子向我们展示了如何在streammux插件之前添加用户自定义的metadata数据到GstBuffer中，并在nvinfer插件的src pad上添加probe回调函数解析这个自定义的metadata。 总的来说，该sample向我们展示了如何使用deepstream metadata extension中类和函数。具体实现： 在h264parse插件的src pad中添加回调函数h264parse_src_p...
DeepStream插件Gstreamer（一）：插件汇总
YBAdiam的博客
11-30 5826
一、Gst-nvinfer Gst-nvinfer插件使用NVIDIA®TensorRT™对输入数据进行推断。该插件从上游接受批处理的NV12 / RGBA缓冲区。NvDsBatchMeta结构必须已经附加到Gst缓冲区。低级库（libnvds_infer）可对尺寸为“网络高度”和“网络宽度”的INT8 RGB，BGR或GREY数据进行操作。Gst-nvinfer插件根据网络要求在输入帧上执行转换（格式转换和缩放），并将转换后的数据传递到低级库。低级库对转换后的帧进行预处理（执行归一化和均值减法）..
deepstream meta应用
evsqiezi
05-06 1946
deepstream-test1 对osd的sink加了一个probe函数osd_sink_pad_buffer_probe，如下代码， NvDsFrameMeta下有NvDsFrameMetaList，NvDsFrameMeta下有NvDsObjectMetaList，统计NvDsFrameMeta下人和车的个数， 并创建NvDsDisplayMeta，将文本信息挂在NvDsDisplayMeta的NvOSD_TextParams，再将NvDsDisplayMeta挂到NvDsFrameMeta。 for
gstreamer插件开发指南：从零实现一个RTMP推流Element
最新发布
weixin_29291069的博客
03-27 225
本文详细介绍了如何从零开发一个GStreamer RTMP推流插件，涵盖插件架构设计、核心代码实现、性能优化技巧及与QT集成的实战方案。针对音视频开发中的RTMP推流需求，提供了包括线程模型、缓冲管理、错误恢复等关键技术的完整实现指南，帮助开发者构建高性能的自定义多媒体处理组件。
DeepStream进阶插件之路
Tosonw的博客
03-11 1万+
一、DeepStream的gst插件 gst插件，即GStreamer插件，是用于实现DeepStream功能嵌入GStreamer编解码流程使用。 GStreamer插件: GStreamer是用于插件，数据流和媒体类型处理/协商的框架。它用于创建流媒体应用程序。插件是在运行时动态加载的共享库，可以独立扩展和升级。当安排并链接在一起时，插件形成处理流水线，该流水线定义了流媒体应用程序的数据流。您...
DeepStream初步学习
热门推荐
Tosonw的博客
02-04 4万+
一、简介 二、下载 可以直接源码git：git clone https://github.com/deepstreamIO/deepstream.io.git 我是下载的v4.0.0版本：https://github.com/deepstreamIO/deepstream.io/archive/v4.0.0.tar.gz 当然我实际使用的deepstream是在Jetson Xavier上的dee...
一文读懂deepstream_reference_apps核心组件：GStreamer插件与TensorRT集成指南
gitblog_00259的博客
03-07 353
deepstream_reference_apps是NVIDIA提供的TensorRT/Deepstream参考应用集合，专为Tesla和Jetson平台优化，通过GStreamer插件与TensorRT的深度集成，实现高效的视频分析和AI推理功能。本文将带你全面了解其核心组件架构、关键技术及实际应用案例。 ## 🚀 核心架构解析：GStreamer与TensorRT的完美融合 deepst
DeepStream插件指南-Gst-nvstreamdemux
tangyzh的博客
02-06 1179
DeepStream插件指南，对插件Gst-nvstreamdemux的原理和流程的说明，并提供3个用例演示该插件的使用。
GStreamer之Metadata
m_wordPlan的博客
07-29 586
Metadata GStreamer 明确区分了它支持的两种类型的元数据： 流标签，以非技术方式描述流的内容；和 Stream-info，这是对流属性的某种技术性描述。流标签示例包括歌曲的作者、歌曲的标题或它所属的专辑。流信息的示例包括视频大小、音频采样率、使用的编解码器等。 tags使用GStreamer标签系统进行处理。 Stream-info可以从一个已经协商过的GstCaps中检索到.这个GstCaps从GstPad中获取到。 Metadata 读取 stream-info 从GstPad
[GStreamer] 内存管理
ykun089的博客
11-25 2420
GstMemory：管理一小块实际的虚拟内存 GstBuffer：一个对象，是element、plugin、application互相信息交互的最小数据单位，内部包含GstMemory、时间信息和一些其他信息。 GstMeta：附加在GstBuffer上，用来提供一些描述内存的额外信息。 GstBufferPool：buffer池，但是只能分配尺寸固定的buffer。 GstMemory： /** * GstMemory: * @mini_object: parent structure
二、Deepsrtream 元数据
Creationyang的博客
03-07 1059
要在NvDsBatchMeta中以批处理、帧或对象级别附加用户特定的元数据，你必须通过调用nvds_acquire_user_meta_from_pool()从用户元数据池中获取一个NvDsUserMeta实例。(详情请参见sources/includes/nvdsmeta.h。)然后必须初始化NvDsUserMeta。必须设置的成员是user_meta_data、meta_type、copy_func和release_func。
【gstreamer常用开发知识】
hello_dear_you的博客
01-10 1620
0. gstreamer工具介绍 这张图描述了Gstreamer的整体框架，GStreamer是一个基于glib实现的跨平台多媒体框架。 0.1 gst-launch-1.0 该工具用来build和run一个Gstreamer pipeline。基本的语法格式如下： gst-launch-1.0 [OPTIONS]PIPELINE-DESCRIPTION PIPELINE-DESCRIPTION是由感叹号（!）分隔开的element list。element的属性可以通过property..
【DeepStream】基于英伟达DeepStream框架进行算法开发（一）：GStreamer基础
种一棵树最好的时间是十年前，其次是现在
02-27 1154
在当今快速发展的人工智能和计算机视觉领域，英伟达的DeepStream框架提供了强大的工具和功能，帮助开发者快速部署和优化实时视频分析应用。本博客将重点介绍基于英伟达DeepStream框架进行算法开发的方法和技巧，包括如何利用DeepStream框架构建高效的算法模型、实现实时视频流处理和应用优化等内容。通过本博客的学习，读者将能够掌握在DeepStream框架下进行算法开发的关键技能，为自己的视频分析项目提供更加稳定和高效的解决方案。
gstreamer/deepstream元素与函数
pursue_dreams的博客
11-11 546
作用：用于限制数据流的格式，可以指定所需的视频格式（如分辨率、帧率、像素格式等）。功能：在数据流传递过程中，确保只有符合特定格式要求的数据能够通过。用途：当你需要确保数据流的格式符合特定要求时，比如将特定分辨率或帧率的视频数据传递给下游的元素时，可以使用capsfilter来进行格式筛选。作用：用于进行NVIDIA GPU硬件加速的视频格式转换和处理。功能：在支持NVIDIA GPU 的环境下，可以利用硬件加速功能来提高视频格式转换的性能和效率。
pyds has no attribute gst_buffer_get_nvds_batch_meta
0x12的专栏
05-28 1917
module pyds has no attribute 'gst_buffer_get_nvds_batch_meta' 此处pyds不是通过 pip3 install pyds安装的，它是nvidia提供的捆绑软件中的一个库 https://developer.download.nvidia.com/assets/Deepstream/Deepstream_python/deepstream_python_v0.9.tbz2 在ds_pybind_v0.9.tbz2中 ds_pybind_v0..
gstreamer&&deepstream 学习笔记（一）——gstreamer
qq_27582707的博客
02-27 2458
主要参考： https://blog.csdn.net/han2529386161/article/details/102896875 https://gstreamer.freedesktop.org/documentation/tutorials/index.html Gstreamer 三个重要概念： 元件（element），箱柜（bin），衬垫（pad） 衬垫基本概念： 下面的这个比喻可能对你理解衬垫(Pads)有所帮助。一个衬垫(Pads)很象一个物理设备上 的插头。 例如一个家庭..
deepstream6.2安装pyds包，module ‘pyds‘ has no attribute ‘gst_buffer_get_nvds_batch_meta‘
Mintylee的博客
07-31 1035
参考链接：https://forums.developer.nvidia.com/t/deepstream-6-2-is-now-available-for-download/241560。原因：此处pyds不是通过 pip3 install pyds安装的，它是nvidia提供的捆绑软件中的一个库。在deepstream的docker中pip install pyds后，运行代码显示。（deepstream版本为6.2，硬件平台为dgpu，ubuntu22.04）
deepstream学习笔记（二）：gstreamer与deepstream-test1说明
submarineas的博客
07-22 3112
GStreamer的核心功能是为插件、数据流和媒体类型处理/协商提供框架。它还提供了一个API来使用各种插件编写应用程序。更具体的说明与文字表述参照官方文档中第一章（），这里直接引出架构设计图具体来说，GStreamer提供用于多媒体应用程序的API插件架构管道架构一种媒体类型处理/协商的机制同步机制超过250个插件，提供超过1000个元素一套工具GStreamer插件可以分为协议处理来源用于音频和视频（涉及协议插件）格式概要。gst-play00。......
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值