许可优化
许可优化
产品
产品
解决方案
解决方案
服务支持
服务支持
关于
关于
软件库
当前位置:服务支持 >  软件文章 >  Unity WebRTC怎么用?实时音视频通信接入分享

Unity WebRTC怎么用?实时音视频通信接入分享

阅读数 12
点赞 0
article_banner


先记录一下

https://docs.unity3d.com/Packages/com.unity.webrtc@3.0/manual/index.html

https://assetstore.unity.com/packages/tools/network/webrtc-video-chat-68030


我直说了,com.unity.webrtc 这包,别指望它能“开箱即用”。它给你的是底层 C# 绑定,信令服务器、ICE 候选交换、信令协议全得你自己搭。很多人以为装上包就能视频通话,跑起来发现连 Offer 都不知道往哪发。所以下面这些步骤,是按“能跑通一个最小闭环”来排的,不是按官方文档的章节顺序。

第一步,装包,别用 Package Manager 的搜索框硬找。 老版本 Unity 要去 Advanced 里勾上 Show preview packages,新版直接加 com.unity.webrtc 这个 name 就行。装完之后,场景里至少得有一个挂 WebRTC.Initialize() 的脚本,这行代码写在 Awake 里,别写在 Start 里,初始化晚了下游的 PeerConnection 会报一些莫名其妙的空引用。

第二步,把“信令”这根筋先搭上,别先去碰摄像头。 WebRTC 本身不规定信令长什么样,它只告诉你 Offer 和 Answer 是 SDP 文本,ICE 候选是一串地址。你的 Unity 客户端需要一个 WebSocket 或者 HTTP 端点,把 CreateOffer() 生成的 SDP 塞出去,再把对面回来的 Answer 用 SetRemoteDescription() 吃进来。很多人卡在这儿,不是代码写错了,是信令服务器的 CORS 没开、wss 证书对不上、或者 JSON 字段名和客户端预期的不一样。先用一个最简单的 Node.js ws 服务把两个客户端之间的 SDP 转发跑通,比什么都强。

第三步,音视频的“采”和“看”是两套东西,别混着调。 发视频端,Camera.CaptureStream() 能把一个 Unity Camera 变成 VideoStreamTrack,直接 AddTrack 扔给 PeerConnection。发音频端,AudioStreamTrack 可以从 AudioSource 或者麦克风抓,但别在 Update 里每帧去碰它。收端更典型:视频帧通过 videoTrack.OnVideoReceived 回调吐出来一个 Texture,你把它赋给 RawImage.texture;音频用 AudioSource.SetTrack(audioTrack) 再 Play(),别自己往 AudioClip 里硬灌 PCM。这两条链路分开跑通,再合到同一个场景里。

第四步,ICE 候选别攒,来一个发一个。 官方 Tutorial 里那种把本地 PeerConnection 的 OnIceCandidate 直接喂给远端 AddIceCandidate 的写法,只适用于单机自环测试。真实场景里,每个候选都要走你的信令通道转发到对面,对面拿到再 AddIceCandidate。Trickle ICE 的意思就是“边收集边发”,不是等 IceGatheringState 变成 Complete 再一把梭。你等,对面也在等,最后等到的是超时。

第五步,STUN 和 TURN,别把 TURN 当“可选优化”。 STUN 只能帮你发现公网映射地址,对称 NAT 和严格企业防火墙底下,P2P 根本打不通,这时候必须有一个 TURN 服务器在公网做中继。自建 coturn 的话,external-ip 必须写公网地址,lt-cred-mech 和 user=xxx:xxx 得配上,UDP 和 TCP 的 3478 端口都要放出来,别只开 UDP 然后疑惑为什么有些网络连不上。在 Unity 侧,RTCConfiguration.iceServers 里至少塞一个 Google 的 STUN 加一个你自己的 TURN,TURN 的 credential 走信令动态下发,别写死在客户端里。

最后一步,先跑 WHIP/WHEP 或者官方 Samples,别自己从零造。 官方包里带了 VideoReceive 和 PeerConnection 等十几个示例,你要的最小闭环在里面基本都有。mediamtx 那套 WHIP/WHEP 的路径更直接:WebRTCPublisher 往 http://localhost:8889/unity/whip POST 一个 Offer,WebRTCReader 从 /stream/whep 拉流,两端都用 StartCoroutine(WebRTC.Update()) 驱动,先确认帧能出来,再回头去拆每一行是干嘛的。你自己写的那套如果连 CreateOffer() 都返回 Error,别硬调,先把示例场景跑通,然后一行一行往你的工程里搬。



免责声明:本文系网络转载或改编,未找到原创作者,版权归原作者所有。如涉及版权,请联系删

相关文章
技术文档
QR Code
微信扫一扫,欢迎咨询~
customer

online

联系我们
武汉格发信息技术有限公司
湖北省武汉市经开区科技园西路6号103孵化器
电话:155-2731-8020 座机:027-59821821
邮件:tanzw@gofarlic.com
Copyright © 2023 Gofarsoft Co.,Ltd. 保留所有权利
遇到许可问题?该如何解决!?
评估许可证实际采购量? 
不清楚软件许可证使用数据? 
收到软件厂商律师函!?  
想要少购买点许可证,节省费用? 
收到软件厂商侵权通告!?  
有正版license,但许可证不够用,需要新购? 
联系方式 board-phone 155-2731-8020
close1
预留信息,一起解决您的问题
* 姓名:
* 手机:

* 公司名称:

姓名不为空

姓名不为空

姓名不为空
手机不正确

手机不正确

手机不正确
公司不为空

公司不为空

公司不为空