Unity Render Streaming,3D模型流式云渲染的解决方案

Unity Render Streaming是Unity开源的一个高质量、高复杂的3D模型在云端渲染,手机端侧、浏览器显示的解决方案。此解决方案的流技术利用了WebRTC,开发人员甚至可以使用WebRTC包创建自己独特的解决方案。

WebRTC的安装使用我们在此前的博客中说过了,大家可以看我之前的博客查看怎样安装。

好,现在我们开始搭建一个Unity Render Streaming来看看demo的运行。

一、Unity Render Streaming安装部署以及案例的运行

1、首先创建一个工程,在Package Manager 的Advanced中首选勾选上Show preview packages,否则你查询不到Unity Render Streaming。

Unity Render Streaming,3D模型流式云渲染的解决方案

2、安装Unity Render Streaming,我们安装最新版本3.0.1-preview.1。

Unity Render Streaming,3D模型流式云渲染的解决方案

3、安装完成之后,我们导入Examples,还是在Unity Render Streaming的安装界面,在右下角点击Import into Project,就可以把Example导入Assets中了。我们就可以跑案例了。

Unity Render Streaming,3D模型流式云渲染的解决方案

4、接下来我们都知道webrtc client之间需要有个signal server,才能进行连接通信。Unity Render Streaming自己提供了一个web app的服务,能够作为signal server。首先我们可以在github上下载代码。地址: https://github.com/Unity-Technologies/UnityRenderStreaming

Unity Render Streaming,3D模型流式云渲染的解决方案

5、下载完成之后,运行webapp需要安装npm与nodejs,请自行安装。我们进入WebApp目录,我们点击run.bat进行运行。Webserver默认的监听端口为80,如果你想修改端口,可以打开package.json,修改"start": "node ./build/index.js", 为"start": "node ./build/index.js --port 9000 -w"。点击run.bat就可以运行了。

Unity Render Streaming,3D模型流式云渲染的解决方案

 

运行结果如下:

Unity Render Streaming,3D模型流式云渲染的解决方案

6、webapp运行之后,我们可以继续运行Unity Render Streaming的例子了。点击WebBrowserInput场景,点击Render Streaming组件,修改Signaling URL: ws://127.0.0.1:9000,并运行之。

Unity Render Streaming,3D模型流式云渲染的解决方案

7、我们在浏览器中输入在webapp设置的IP 与端口,比如127.0.0.1:9000。

Unity Render Streaming,3D模型流式云渲染的解决方案

 

8、点击VideoPlayer Sample,然后运行就可以查看到Unity中渲染的场景了。

Unity Render Streaming,3D模型流式云渲染的解决方案

当前已经完成了Unity Render Streaming案例的运行,大家就可以行动起来,搭建自己的3D远程渲染服务了。

二、Unity Render Streaming android版本支持

由于Unity Render Streaming还不支持在Android手机版本,会在3.1版本支持,如果大家不着急可以等待官方发布3.1版本支持Android手机。但是,我是比较着急的,就自己尝试修改了Unity Render Streaming代码,来支持android手机上的运行。

1、重新创建一个项目,然后我们找到上个项目中的Unity Render Streaming包的缓存找到,一般都是在项目工程目录的Libray/PackageCache中,我们com.unity.renderstreaming@3.0.1-preview目录拷贝到新的工程的Pakcage目录中。

Unity Render Streaming,3D模型流式云渲染的解决方案

2、进入com.unity.renderstreaming@3.0.1-preview目录,我们修改package.json文件,把依赖的com.unity.webrtc版本提高到2.4.0-exp.1版本,支持android的版本。

Unity Render Streaming,3D模型流式云渲染的解决方案

3、修改兼容性代码,首先修改Runtime\Scripts\RenderStreamingInternal.cs文件的第350行,修改函数SendOfferCoroutine,这主要修改的是设置只接收流的方式改变,之前使用RTCOfferOptions option = new RTCOfferOptions { offerToReceiveAudio = true, offerToReceiveVideo = true };来进行设置,新的webrtc版本不支持这种设置方式,修改为

            RTCRtpTransceiver transceiver = pc.AddTransceiver(TrackKind.Video);

            transceiver.Direction = RTCRtpTransceiverDirection.RecvOnly;

Unity Render Streaming,3D模型流式云渲染的解决方案

修改第447行RTCAnswerOptions改为RTCOfferAnswerOptions。

Unity Render Streaming,3D模型流式云渲染的解决方案

其他的地方都是修改RTCAnswerOptions改为RTCOfferAnswerOptions。

4、我们知道webrtc只支持ARM64。所以需要进行配置,Build Settings->Android->Player Settings->Player->Other Settings,找到Scripting Backend,把Mono更改为IL2CPP, 把ARM64勾选上。然后在编译到android手机上,就可以正常运行了。当然在配置之前,先Switch Platform一下,否则你无法配置。

Unity Render Streaming,3D模型流式云渲染的解决方案

最后

一个高质量、高复杂、无法在各种端侧渲染的3D模型,我们可以使用Unity Render Streaming在云端渲染,端侧呈现的解决方案。为以后VR/AR端边云协同渲染提供了一个解决方案,有值得研究的价值。

上一篇:Spark一些优化


下一篇:Flink实战(八十六):flink-sql使用(十三)Flink 与 hive 结合使用(五)Hive Streaming