【UE4】帧数据获取与转换

最新推荐文章于 2025-03-09 15:38:22 发布
转载 最新推荐文章于 2025-03-09 15:38:22 发布 · 1.1k 阅读 · 3 ·
本内容遵循CC 4.0 BY-SA版权协议
原文链接：https://www.cnblogs.com/shiroe/p/15543353.html
标签
#ue4 #c++
Python3.8

Python3.8

Conda
Python

Python 是一种高级、解释型、通用的编程语言，以其简洁易读的语法而闻名，适用于广泛的应用，包括Web开发、数据分析、人工智能和自动化脚本

方式一

  • 利用 SceneCaptureComponent2D 和 RenderTexture2D 获取 TArray 数据，再转成Texture2D或者 uint8 数组
  • 需要连续采集时，不推荐

方式二

  • 利用RHI的 ENQUEUE_RENDER_COMMAND 和 ReadSurfaceData
  • 比较推荐，之前和 python tensorflow 内存共享帧数据时用过，但后来发现其实 python 那边完全可以从显存那边拿数据（背锅者的自我修养）

方式三

  • 读取BackBuffer
  • 利用 OnBackBufferReadyToPresent 和 OnBackBufferReady_RenderThread(SWindow& SlateWindow, const FTexture2DRHIRef& BackBuffer)
  • 一般推荐

方式四

  • 利用 FFrameGrabber

其他(视频流)

  • OBS
  • FFmpeg、vlc
  • win32gui - python

参考

您可能感兴趣的与本文相关的镜像

Python3.8

Python3.8

Conda
Python

Python 是一种高级、解释型、通用的编程语言，以其简洁易读的语法而闻名，适用于广泛的应用，包括Web开发、数据分析、人工智能和自动化脚本

FFMPEGMedia：虚幻FFMPEG插件，支持更多视频格式和Alpha视频
02-06
FFMPEG媒体插件，用于虚幻引擎 一个让您将FFMPEG库用作媒体播放器的插件 特征： 在Windows和Mac上均可使用 支持硬件加速编解码器 支持带有Alpha的视频 如何使用 该插件适用于Unreal 4.26 您可以将存储库克隆到<Game>/Plugins/或者如果需要，可以将git子模块用于自己的git存储库。 另外，如果您希望使插件可用于所有项目，则可以复制到Engine/Plugins/ 。 不要忘记运行UE4的“ Generate Project Files来说明这些更改！ 按照以下步骤但出于对使用自动播放器的偏爱，请在播放器替代中选择FFMPEGPlayer，以进行
OpenCV插件UE4
04-28
OpenCV插件UE4
Unreal常用代码片段
sddxccj的博客
04-26 851
Unreal常用代码片段从backbuffer抓取数据并保存成图片 从backbuffer抓取数据并保存成图片 // Read the data out of the back buffer and send as a JPEG. FRHICommandListImmediate& RHICmdList = FRHICommandListExecutor::GetImmediateCom...
Unreal：如何高效的将数据从GPU拷贝到CPU
sddxccj的博客
07-13 4570
前言 如 上一篇文章所述所述:我们在jiang
UE4纹理Texture2D绘制
jxyyl的博客
10-20 2725
// clearColors是图像清除时的底色 TArray<FColor> clearColors; for (uint32 Row = 0; Row < cameraInfo->height; ++Row) { for (uint32 Col = 0; Col < cameraInfo->width; ++Col) { clearColors.Add(FColor::Black); } } // 用于绘制的纹理 UTexture2D* tex = m_.
UE4读取BackBuffer缓冲区贴图（屏幕表面）
qq_31042143的博客
12-23 1982
添加Build.cs模块 需要添加的build模块： “Renderer”, “RenderCore”, “RHI”, “Slate” PrivateDependencyModuleNames.AddRange(new string[] { "HTTP", "Renderer", "RenderCore", "RHI", "Slate" }); 头文件 void OnBackBufferReady_RenderThread(SWindow& SlateWindow, const FTextu
ffmpeg 推流可以暂停么_UE4结合FFmpeg实现录制和推流画面(一)
weixin_42499899的博客
11-30 1491
之前,有碰到过需要在游戏中录制画面,或者推流游戏画面的需求,所以这里使用了FFmpeg来帮助做到了这一点.下面简单的把这个流程记录一下,这里先只讨论录制的功能,关于FFmpeg内部的细节就先不说了.​ 目前的工作流程:​ Game,Render,Auido,Encode,共4个线程:​ Game:记录累加时间,每隔一定时间(1000毫秒/输入的fps(帧率))去把最近一次记录的渲...
UE4中通过Opencv读取网络摄像头画面
wxr19890830的博客
01-28 7478
首先参考https://wiki.unrealengine.com/Detailed_Account_Of_Integrating_OpenCV_Into_UE4_With_VS2017 配置好环境。 切记一定要仔细，不要遗漏任何步骤，这里就不过多赘述。 那么这里主要记录如何获得图像简单的方法在UE4中显示出来。 首先是头文件CamData.h加入 UFUNCTION(Bluep
虚幻引擎(UE4) C++与蓝图之性能比较
刀客
02-05 1万+
当为游戏设计技术方案的时候，一个最主要的问题就是什么内容需要放在蓝图实现，什么内容要放在c++中实现。本文旨在讨论这些问题，并给出一个参考的建议。 游戏逻辑和数据 广义的说，游戏内容可以分为Logic(逻辑)和Data(数据)。Logic是游戏的指令和结构，Data被用于逻辑并描绘了游戏具体干了些什么。有时候这种区分是显而易见的，例如c++在屏幕上绘制一个角色是基于逻辑的，而角色的物理外观是基于数据的。但是在实际练习中，各种各样的Logic和Data混杂在一起是非常复杂的，理解这其中的区别和做出正确的选
虚幻引擎编程基础（一）
【黑键】
06-13 4195
虚幻引擎编程基础（一） 文章目录虚幻引擎编程基础（一）一、前言二、容器2.1 TArray2.1.1 创建动态数组容器2.1.2 增加元素2.1.3 删除元素2.1.4 查询2.1.5 遍历2.1.6 排序2.2 TMap2.2.1 增加元素2.2.2 删除元素2.2.3 查询2.2.4 排序2.2.5 遍历2.2.6 **TMultiMap**2.3 TSet2.3.1 添加元素2.3.2 删除元素2.3.3 查询2.3.4 遍历2.3.5 两个集合的操作三、字符串转换3.1 FString 转 FNam
虚幻4 动画系统概述
热门推荐
Dream World
04-26 1万+
虚幻引擎提供了一套完整的动画设计系统，从基本的动画导入，到最后的人物动画控制，流程完善成熟，上手简单。下面先从宏观上介绍下UE4的动画系统，然后深入介绍几个功能模块。一、整体介绍 下面这张图翻译自官方文档，它从整体上介绍了动画功能的来龙去脉，简单明了。 处于核心的是Pawn和Character蓝图，它相当于游戏玩家，包含可视化的人物骨骼、形象，它接收用户的输入，并让角色执行某种行为（如奔跑、跳跃
【亲测免费】 使用FFmpeg在Unreal Engine 4中实现高级媒体处理：UE4-FFmpeg项目详解
gitblog_00007的博客
03-31 1403
使用FFmpeg在Unreal Engine 4中实现高级媒体处理：UE4-FFmpeg项目详解 项目简介 是一个开源项目，它将流行的多媒体处理库FFmpeg集成到了Epic Games的Unreal Engine 4（简称UE4）中。通过这个项目，开发者可以在游戏引擎内部直接进行视频和音频的编码、解码、流处理等操作，极大地扩展了UE4在多媒体应用中的可能性。 技术分析 FFmpeg FFmpeg...
UE4获取深度缓存
Redisread的博客
07-25 2419
深度像素格式 键入命令vis scenedepthz uv0以查看实际使用的深度缓冲区。UE4对场景使用“反向”深度缓冲区。 获取 在任意tick函数或者其他函数添加以下的命令： struct DepthPixel //定义深度像素结构体 { float depth; char stencil; char unused1; char unused2; char unused3; }; float* cpuDataPtr; // Texture深度值数组首地址 TArray&l
UE4音视频功能插件
jxyb2012的博客
12-25 3058
UE4音视频功能插件说明第三方库准备目录结构FFMPEGThirdParty.Build.csUE4插件 说明 UE4.23 VS2017 ffmpeg4.2.1 第三方库准备 目录结构 ThirdParty ffmpeg bin(来源于shared/bin) examples include(来源于dev/include) lib(来源于dev/lib，只要.lib文件) FFMPEG...
UnrealEngine4 - 获取UE4最后的渲染缓存数据BackBuffer
HW140701的博客
11-23 7016
1 获取UE4最后的渲染缓存的思路 1.2 从官方插件PixelStreaming中得到的思路 PixelStreaming是UE_4.21开始支持的一项技术，简单来说就是能够将游戏跑在服务器上，你可以通过浏览器来玩，玩家端不需要额外操作，只需要一个浏览器，所有的逻辑处理和渲染都在“云”端执行。它不仅仅只是一个插件(虽然有PixelStreamingPlugin这个插件，但它只是PixelStreaming实现中的一环)，其实现具有一套独立与UE游戏的设计和组织方式。 而其中PixelStreamingPl
UE4 制作导出Content目录下某个文件夹内所有模型的六视图并将模型资源文件复制到指定文件夹的插件
qq_41410054的博客
05-12 1901
一、新建空白插件 在Bulid.cs内加入两个模块，"EditorSubsystem","UnrealEd", PublicDependencyModuleNames.AddRange( new string[] { "Core", "EditorSubsystem", "UnrealEd", // ... add other public dependencies that you statically
FFmpeg对UE4相机画面实时推流
最新发布
qq_45942988的博客
03-09 1773
这是我在校给导师做的项目其中的视频流传输模块，虽然可能看起来比较简单，但却是我自己一步步踩坑之后实现的。大家好，这篇博客的主要内容是把自己在校做的项目的方法和大家分享，主要内容是使用C++将UE4的虚拟相机画面通过ffmpeg进行推流，主要涉及三部分内容：首先是UE4的虚拟相机画面实时获取，接着准备rtsp服务器，最后使用ffmpeg推流。以上就是使用ffmpeg对UE4的虚拟相机画面进行推流，只是大概介绍了一下步骤并附上了部分代码，有些具体细节并没有写，有需要的兄弟可以联系我，我会提供代码并教你实现。
[UE4]C++中获取实时帧数
辰先生的自娱自乐
10-30 2981
#include "Engine.h" float UMyLibrary::GetAverageFps() { extern ENGINE_API float GAverageFPS; return GAverageFPS; } float UMyLibrary::GetAverageMs() { extern ENGINE_API float GAv...
opengl将bmp读成像素_Unreal：如何高效的将数据从GPU拷贝到CPU
weixin_39617702的博客
11-25 745
如 上一篇文章所述所述:我们在从BackBuffer中读取像素数据时，使用了 ReadSurfaceData 这个函数，这个函数是非常耗时的， 因为涉及到了将像素数据从GPU拷贝回CPU，看一下unreal这个函数的源码，我们会发现在真正拷贝数据之前会调用下Flush函数，这块导致了耗时的增加，我测试了下大概在30ms左右。FORCEINLINE void ReadSurfaceData(FRHI...
【例1825】read surface data Read surface data
王牌飞行员_里海的博客
06-15 307
read surface data Read surface data》这是一个NX二次开发官方小例子，下面是代码和解析。相较于混乱、未经验证的代码，官方案例能够确保开发者获得准确的开发方法，这些官方示例代码经过严格测试，能够正确地反映出NX软件的功能和API使用方式，有助于开发者系统地掌握NX二次开发技能，提高开发质量和效率。本专栏订阅后是永久阅读的。欢迎一起学习NX二次开发案例，逐步积累宝贵的经验，早日成为行业专家。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值