技术标签: unreal
发表于 2020-04-10 | 更新于: 2020-04-20 | 分类于 Unreal Engine | 717
本篇是关于PixelStreaming开发和部署全流程的记录,从开发者角度分析探讨像素流送技术以及部署过程中遇到的问题,希望能为其他开发者带来帮助或者解决实际问题,偶尔也会有补充和更新,希望同样关注PixelStreaming技术的朋友与我交流。
PixelStreaming自UnrealEngine4.21版本开始提供测试,能够向Web浏览器发送高质量的可视化内容,让移动设备和轻量级Web浏览器能够轻松浏览工作站品质的3D图形。用户通过链接即可访问,并且提供了多人同时访问或单人独立访问的自由部署方案,将像素流送项目部署在云平台服务器上,在高性能、高负载的云计算平台以及高速率、低延迟的5G技术的支持下,实现多人、异地、多终端的远程协同。
PixelStreaming技术可以为汽车制造商以及经销商提供一种通用的线上展厅解决方案,为汽车客户带来方便快捷的高质量汽车交互体验。以此解决方案为思路,可拓展至工业产品研发过程中,对工业数据进行3D可视化,创建交互式内容,以进行不同角色的设计人员在异地辅助决策,缩短产品设计和评审时间,从而减少产品研发过程中的资金及时间成本,显著提高工作效率。另外在智慧城市、智慧交通、数字地产等行业,PixelStreaming也有很大的用武之地。
UE4.24版本之前,PixelStreaming通过配置PixelStreaming插件、WebRTC代理服务器、Signaling和Web服务器来工作。
PixelStreaming插件:负责视频编码,将视频与音频压缩到媒体流中,并发送到WebRTC代理服务器。
WebRTC代理服务器:负责将像素流送插件产生的媒体流通过直接的点对点连接转发给查看者。
Signaling和Web服务器:负责在查看者和WebRTC代理服务器之间建立连接,为查看者提供播放媒体流内容的HTML和JavaScript环境。
UE4.24版本开始,PixelStreaming不需要启动WebRTC代理服务器,其工作流程变为了由Signaling和Web服务器充当桥梁,连接UE4应用和Web浏览器。
运行WebRTC代理服务器
目录: \Engine\Source\Programs\PixelStreaming\WebRTCProxy\bin\Start_WebRTCProxy.bat
运行SignallingWeb服务器
目录: \Engine\Source\Programs\PixelStreaming\WebServers\SignallingWebServer\runAWS_WithTURN.bat
启动参数: --publicIp 127.0.0.1(此IP为客户端访问地址,根据情况修改,如公网:--publicIp 49.xx.xx.42)
运行应用程序实例
目录: WindowsNoEditor/PixelStreamingDemo.exe
启动参数: -AudioMixer -PixelStreamingPort=8124 -RenderOffScreen
客户端使用支持WebRTC协议的浏览器(Google Chrome、Mozilla Firefox、Apple Safari)访问网页链接
http://127.0.0.1 (此IP为启动SignallingWebServer时设置的publicIp值)
运行SignallingWeb服务器
目录: \Engine\Source\Programs\PixelStreaming\WebServers\SignallingWebServer\runAWS_WithTURN.bat
运行应用程序实例(PixelStreamingIP为客户端访问地址,根据情况修改,如公网:-PixelStreamingIP=49.xx.xx.42)
目录: /WindowsNoEditor/PixelStreamingDemo.exe
启动参数: -PixelStreamingIP=127.0.0.1 -PixelStreamingPort=8888 -AudioMixer -RenderOffScreen
客户端使用支持WebRTC协议的浏览器(Google Chrome、Mozilla Firefox、Apple Safari)访问网页链接
http://127.0.0.1 (此IP为运行应用程序实例时设置的PixelStreamingIP)
相关参数说明:
** 待更新 **
启动Matchmaker/run.bat
启动参数(默认为90/9999,启动时可不加参数): --httpPort 90 --matchmakerPort 9999
启动SignallingWebServer_run.bat
启动参数(streamerPort=8888为默认):
[服务器1] --UseMatchmaker true --matchmakerAddress 127.0.0.1 --matchmakerPort 9999 --publicIp 127.0.0.1 --httpPort 80 --streamerPort = 8888
[服务器2] --UseMatchmaker true --matchmakerAddress 127.0.0.1 --matchmakerPort 9999 --publicIp 127.0.0.1 --httpPort 81 --streamerPort = 8887
启动PixelStreaming.exe应用程序实例
启动参数:
[实例1] -PixelStreamingIP=127.0.0.1 -PixelStreamingPort=8888 -AudioMixer -RenderOffScreen
[实例2] -PixelStreamingIP=127.0.0.1 -PixelStreamingPort=8887 -AudioMixer -RenderOffScreen
客户端使用支持WebRTC协议的浏览器(Google Chrome、Mozilla Firefox、Apple Safari)直接浏览 http://127.0.0.1:90 ,Matchmaker将自动分配端口,从而单独浏览实例。或者分别访问网页链接:
[网址1] http://127.0.0.1:80
[网址2] http://127.0.0.1:81
即可多人浏览单独的PixelStreaming应用程序实例。
以华为云为例,其他云平台情况大致相同,腾讯云、阿里云可以直接运行像素流送实例,可省略部分步骤。
云服务器系统信息:
DirectX版本: DirectX 11
CPU: Intel(R) Xeon(R) CPU E5-2697 v4 @ 2.30GHz (16 CPUs), ~2.3GHz
GPU: NVIDIA Tesla M60
防火墙设置
默认防火墙设置可能会禁止像素流所用到的端口的通信。快速测试时,在控制面板 >> 防火墙设置中先关闭防火墙。正式使用时,应该在高级防火墙设置中,创建相应的规则,将需要使用的协议或者端口打开,也可以将像素流应用及其他相关应用都加入到白名单中去。
安装.NET Framework3.5
cmd命令行 >> 输入servermanager >> 回车 >> 选择管理>>添加角色和功能 >> Next >> 功能 >> 选择.NET Framework3.5 >> 点击安装
启动声音服务
cmd命令行 >> services.msc >> 将Windows Audio以及Windows Audio Endpoint Builder服务启动
设置远程桌面链接远程音频
关闭IE的安全配置
Windows Server 默认设置是不允许从浏览器下载内容的,所以要通过浏览器下载任何软件,你需要先在ServerManager里关闭IE Enhanced Security Configuration。当然安全起见,当下载完需要的软件后,还是建议重新启用以增强系统的安全性。
云服务器运行Unreal Engine4.24 PixelStreaming实例必须安装vGPU/GRID驱动
其他云平台默认预装了vGPU/GRID最新驱动,无需后续步骤。
后续步骤为华为云服务器上GRID/vGPU驱动的安装步骤,安装此驱动是为了解决云服务器运行Unreal Engine4.24 PixelStreaming应用程序实例时,有NvEnc的相关报错。运行4.21版本的像素流送应用程序实例无此问题。
安装华为云提供的NVIDIA驱动
华为云Window公共镜像中有该驱动的安装文件,文件目录C:\NVIDIA\369.71,点击Setup.exe安装即可。此步骤是为了先安装,后更新。直接安装来自NVIDIA License Dashboard下载的GRID/vGPU最新驱动,会安装失败。
申请GRID/vGPU驱动License
有申请License的步骤是因为,我只知道这一种获取最新的驱动软件包的方式,就是通过申请License的方式获得NVIDIA邮件提供的链接,进入License Dashboard下载。
NVIDIA官网申请GRID驱动的免费License (申请需要企业邮箱)
重要说明: N卡的图形功能不需要License,仅计算功能需要License,PixelStreaming只用到视频编码,不需要计算功能,所以没必要配置License。在这之前我并不知道这一点,所以走了很多弯路。虽然对于PixelStreaming来说不需要,不过关于获取vGPU/GRID驱动 License、安装License Server、配置License等详细步骤以及问题解决我将会在另一篇文章说明,提供给有需要的朋友参考。
更新GRID vGPU驱动
通过License申请成功的邮件所提供的链接NVIDIA License仪表盘 ,下载到vGPU/GRID驱动最新的软件包,如”NVIDIA-GRID-Windows-418.130-426.52.zip“,安装更新即可。
到此,运行Unreal Engine4.24 PixelStreaming应用程序实例,运行正常,没有报错。
启动STUN服务 Start_STUNServer.bat
目录: \Engine\Source\ThirdParty\WebRTC\rev.23789\programs\Win64\VS2017\release\Start_STUNServer.bat
启动Signalling和Web服务器 runAWS.bat
目录: \Engine\Source\Programs\PixelStreaming\WebServers\SignallingWebServer\runAWS.bat
启动应用程序实例,具体启动参数参考局域网部署步骤。
如果上述步骤Web浏览器无法查看视频流送,则换用TURN服务部署方法。
启动TURN服务 Start_AWS_TURNServer.bat
目录: \Source\ThirdParty\WebRTC\rev.23789\programs\Win64\VS2017\release\Start_AWS_TURNServer.bat
启动Signalling和Web服务器 runAWS_WithTURN.bat
目录: \Engine\Source\Programs\PixelStreaming\WebServers\SignallingWebServer\runAWS_WithTURN.bat
启动应用程序,具体启动参数参考局域网部署步骤。
启动Start_AWS_TURNServer.bat
启动Matchmaker/run.bat
启动参数(默认为90/9999,启动时可不加参数):
--httpPort 90 --matchmakerPort 9999
启动SignallingWebServer/runAWS_WithTURN.bat
启动参数(streamerPort=8888为默认):
[服务器1] --UseMatchmaker true --matchmakerAddress 127.0.0.1 --matchmakerPort 9999 --publicIp 127.0.0.1 --httpPort 80 --streamerPort = 8888
[服务器2] --UseMatchmaker true --matchmakerAddress 127.0.0.1 --matchmakerPort 9999 --publicIp 127.0.0.1 --httpPort 81 --streamerPort = 8887
云服务器上,参数UseMatchmaker 不起作用,需要修改config.json文件,将UseMatchmaker改为True:
|
|
在云服务器上,参数httpPort 、streamerPort 也不起作用,修改cirrus.js对应的参数即可
|
|
需将SignallingWebServer文件夹复制多份,作相应配置。
启动PixelStreaming.exe应用程序实例
启动参数:
[实例1] -PixelStreamingIP=127.0.0.1 -PixelStreamingPort=8888 -AudioMixer -RenderOffScreen
[实例2] -PixelStreamingIP=127.0.0.1 -PixelStreamingPort=8887 -AudioMixer -RenderOffScreen
客户端使用支持WebRTC协议的浏览器(Google Chrome、Mozilla Firefox、Apple Safari)直接浏览http://127.0.0.1:90 ,Matchmaker将自动分配端口,从而单独浏览实例。或者分别访问网页链接
[网址1] http://127.0.0.1:80
[网址2] http://127.0.0.1:81
即可多人浏览单独的PixelStreaming应用程序实例。
参考资料
Unreal Engine Docs: Platform Development_Pixel Streaming
Unreal Engine Blog: UE4像素流应用在公有云上的快速部署指南_周澄清
坚持原创技术分享,您的支持将鼓励我继续创作!
打赏
文章浏览阅读4.4w次,点赞11次,收藏56次。分类问题是人类所面临的一个非常重要且具有普遍意义的问题,我们生活中的很多问题归根到底都是分类问题。文本分类就是根据文本内容将其分到合适的类别,它是自然语言处理的一个十分重要的问题。文本分类主要应用于信息检索,机器翻译,自动文摘,信息过滤,邮件分类等任务。文本分类技术发展历史 1960-1970:那时主要通过人工+规则(关键词或者正则表达式)的方式,制定规则的人需要对某类目领域有足够的认知和了解。举_文本特征提取word2vec
文章浏览阅读1k次。本文利用libevent,实现一个C++线程池,,可自定义用户任务类,继承于任务task基类,重写任务基类的纯虚函数实现多态。比如将定义定义处理客户端的请求任务类,实现对客户端请求的并发处理。工作队列:可以理解为线程的队列,一个线程同时可以处理一个任务,空闲的线程回从任务队列取出任务执行。当工作队列空时,线程会睡眠。任务队列:用户将任务加入任务队列,然后通知工作队列,取出一个任务到线程中执行。_windows c++ 开发 客户端 libevent
文章浏览阅读3.4w次,点赞3次,收藏11次。篇一:《工作中存在的不足及改进措施》通过近一段时间的工作,反省自身,还存在许多不足和缺点,现将近期的工作、学习中存在的不足和缺点简要总结如下:1、自身的专业业务水平不高,事故应急处理能力不强.虽然通过学习和工作经验的积累,在业务水平上有了一定的提高,但业务水平和工作经验与其它老同志比还是比较低.在日常工作中偏重于日常生产工作,也忽视了自身思想素质的提高,工作中争强当先的意识不强.2、工作上满足于正..._工作不足之处及改进措施
文章浏览阅读2k次。常用的poi工具,如easy-excel,hutool读取excel是都是先将整个excel加载到内存中分析,然后再一行行遍历,当excel文件太大时读取的时间就会更长,如果我们只需要读取excel的前几行来进行预览就不能使用这种方式,应该按需读取。_java 读取大文件excel
文章浏览阅读237次。HTML_常用标签测试_html标签检测
文章浏览阅读482次。牛顿法是一种用于求解非线性方程组的迭代优化方法。其基本原理是基于泰勒级数展开和一阶导数的近似,通过不断迭代修正初始猜测解来逼近方程组的解。Fx0其中,Fxf1xf2x...fnxT是一个多元函数,xx1x2...xnT是待求解的变量向量。牛顿法的基本思想是,在当前的迭代点xk处,用一个一阶泰勒展开来近似fixfix≈fixkj1∑n∂xj∂fixk。
文章浏览阅读815次。文章目录摘要摘要_后端克里金插值分析
文章浏览阅读3.3w次,点赞10次,收藏36次。我们在 Windows 操作系统中写文档,做笔记,通常使用 Windows 自带的记事本,可是记事本不支持插入图片,创建表格等功能,从而不得不使用 Office Word。不知道大家有没有这样的感觉,使用 Office Word 写文档,效率极低,需要一边敲字,一边使用鼠标排版,比如:在文章中给团队的名字“LSGO软件技术团队”加粗,就需要先用鼠标选中这个词语,然后点击工具栏中“B”形状的工具..._有道云笔记如何建立 文档索引
文章浏览阅读137次。IP-guard 远程命令执行漏洞_ipg 漏洞
文章浏览阅读255次。2017年,全球数据泄露事件已不仅是呈翻倍的速度增长。16年的14亿条,到17年仅上半年的17亿条,这样的数据泄露规模你是否还在存在侥幸心理,就是那所谓的“怎么可能刚好落在我身上”。随着我们在工作、生活中的云化,就在今天,万物互联已经融入到我们每个人的生活中,相信在不就的将来,整个IOT时代也将会很快的到来。仔细回忆一下,今天我们所做的任何情都离不..._8,iot时代,数据安全有哪些新特征?
文章浏览阅读6.7k次,点赞47次,收藏143次。存放文本时,也可以使用Text数据类型,可以将TEXT列视为VARCHAR列,注意Text不能有默认值,大小0-2^16字节;同一查询在同一事务中多次进行,由于其它提交事务所做的修改和删除,每次返回不同的结果集,则发生不可重复读;多个连接开启各自事务操作数据库中数据时,数据库系统要负责隔离操作,以保证各个连接在获取数据是的准确性;同一查询在同一个事务中多次执行,由于其它提交事务所做的插入操作,每次返回不同的结果集,此时发生幻读;同真是的表一样,视图包含列,其数据来自对应的真实表(基表)_mysql教程
文章浏览阅读550次,点赞10次,收藏6次。GD32官方的开发环境(基于Eclipse)的使用。_gd32e23 开发环境