WEBRTC 视频聊天应用程序无法在不同网络中运行

问题描述

我的视频聊天应用程序在同一网络中正常运行。它也使用 stun 生成和连接 IceCandidate。但由于某种原因,对等视频不能在不同的网络中播放。我在调试问题时遇到问题。

我没有使用任何回合服务器,但我怀疑这是问题所在,因为来自不同网络的对等点已经使用 stun 加入,只有视频无法播放

var socket= io('/')
var divVideoChatLobby = document.getElementById("video-chat-lobby")
var divVideoChat = document.getElementById("video-chat-room")
var joinButton = document.getElementById("join")
var userVideo = document.getElementById("user-video")
var peerVideo = document.getElementById("peer-video")
var roomInput = document.getElementById("roomName")
var roomname= roomInput.value
var rtcPeerConnection
var userStream

const iceServers = {
    iceServers:[
        {urls: "stun:stun.services.mozilla.com"},{urls: "stun:stun.l.google.com:19302"},{urls: "stun:stun1.l.google.com:19302"},{urls: "stun:stun3.l.google.com:19302"},{urls: "stun:stun4.l.google.com:19302"},{urls: "stun:stun.ekiga.net"},]
}

userVideo.muted= "muted"
// var roomDiv = document.getElementById("room-div")
// roomDiv.style="display:none"
var creator=false

joinButton.addEventListener('click',function () {
    console.log('Room Name:',roomInput.value)
    if (roomInput.value == "") {
        alert("Please enter a room name")
    }
    else {
        socket.emit("join",roomInput.value)
    }
})

socket.on("created",function(){
    creator=true
    navigator.getUserMedia(
        {
            audio: true,video:true 
            // { width: 1280,height: 720 }
        },function(stream) {
        divVideoChatLobby.style="display:none"
        // roomInput.value
        // roomDiv.style="visibility: visible"
        // console.log('room name',roomInput)
        console.log("got user media stream")
        userStream= stream
        userVideo.srcObject = stream
        userVideo.onloadedMetadata = function(e){
        userVideo.play()}
        },function() {
            alert("Couldn't acces User Media")
        }
    )
})

socket.on("joined",function(){
    creator=false
    navigator.getUserMedia(
        {
            audio: true,function(stream) {
            divVideoChatLobby.style="display:none"
            // roomInput.value
            // roomDiv.style="visibility: visible"
            // console.log('room name',roomInput)
            userStream=stream
            userVideo.srcObject = stream
            userVideo.onloadedMetadata = function(e){
                userVideo.play()}
            socket.emit("ready",roomInput.value)
            console.log("haha to you")
        },function() {
                alert("Couldn't acces User Media")
            }
            )

            
        })
        
        socket.on("full",function(){
            alert("The room is full. You cannot join Now")
        })
        
        socket.on("ready",function(){ 
            console.log("haha to you 3")
            if(creator){
                rtcPeerConnection= new RTCPeerConnection(iceServers)
                rtcPeerConnection.onicecandidate= OnIceCandidateFunction
                rtcPeerConnection.ontrack = OnTrackFunction
                rtcPeerConnection.addTrack(userStream.getTracks()[0],userStream)
                rtcPeerConnection.addTrack(userStream.getTracks()[1],userStream)
                rtcPeerConnection.createOffer(function(offer){
                    rtcPeerConnection.setLocalDescription(offer)
                    socket.emit("offer",offer,roomInput.value)
                 },function(error){
                    console.log(error)    
                })
            }

        })


        socket.on("candidate",function (candidate) {
            var icecandidate = new RTCIceCandidate(
                {candidate: candidate.candidate,sdpMID:candidate.sdpMID,sdpMLineIndex:candidate.sdpMLineIndex,})
                    console.log("INSIDE CANDIDATEEEEEEEEEEEEEEE")
            rtcPeerConnection.addIceCandidate(icecandidate)
          });

            // socket.on("candidate",function(candidate){
                
            //     rtcPeerConnection.addIceCandidate(candidate)

            // })
            
            
             socket.on("offer",function(offer){
                if(!creator){
                    rtcPeerConnection= new RTCPeerConnection(iceServers)
                rtcPeerConnection.onicecandidate= OnIceCandidateFunction
                rtcPeerConnection.ontrack = OnTrackFunction
                rtcPeerConnection.addTrack(userStream.getTracks()[0],userStream)
                rtcPeerConnection.setRemoteDescription(offer)
                rtcPeerConnection.createAnswer(function(answer){
                    rtcPeerConnection.setLocalDescription(answer)
                    socket.emit("answer",answer,function(error){
                    console.log(error)    
                })

                }
            })

            socket.on("answer",function(answer){
                rtcPeerConnection.setRemoteDescription(answer)
            })


function OnIceCandidateFunction(event){
    console.log('EVENT CANDIDATE',event.candidate)
    if(event.candidate){
        // console.log('EVENT CANDIDATE',event.candidate)
        socket.emit("candidate",event.candidate,roomInput.value)
    }
} 

function OnTrackFunction(event){
    peerVideo.srcObject = event.streams[0]
    console.log("EVENT STREAM 0",event.streams[0])
    peerVideo.onloadedMetadata = function(e){
        console.log("IN THE ONTRACKFUNC")
    peerVideo.play()
    }
}

解决方法

WebRTC 可以通过多种方式进行连接,并且会随着第一个选择失败而逐渐下降到较低的偏好选择。

  1. 具有自己 ip 的天真直接 p2p
  2. 如果失败,请使用 STUN 服务器来确定我们背后的 IP(例如,路由器)
  3. 如果失败,则无法实现真正​​的 p2p,请改用 TURN 服务器来中继流量。

WebRTC 会尽其所能建立 p2p 连接,但有时会失败。轮转服务器作为最后的手段,这样对等方都可以通过轮转服务器进行连接。显然这不是 p2p 连接,因此会有额外的延迟,您必须确保轮流服务器有足够的带宽来覆盖您期望的所有连接。

通常大约 20% 的连接需要 TURN 服务器。它可能在您的网络上工作正常,但尝试从具有防火墙和不同网络配置(通常需要 TURN)的不同网络访问您的 webRTC 服务,您会发现并非所有连接都是平等的点对点。所以基本上这就是你正在发生的事情,不同的对等点在不同的网络中,所以你没有得到对等点的视频。

基本上发生的事情是,由于对等点具有不同的网络,因此进行正确的 Ice 候选交换变得更加困难,因此不会发生在 sdp 协商期间决定的媒体传输,因此我们需要一个公共公共服务器(TURN 服务器)作为对等其他对等点进行平滑的冰候选交换,以便媒体传输可以发生(此 TURN 服务器充当对等点之间媒体传输的中继)我相信在您的情况下,视频、音频也因这个原因而无法正常工作.

相关问答

Selenium Web驱动程序和Java。元素在(x,y)点处不可单击。其...
Python-如何使用点“。” 访问字典成员?
Java 字符串是不可变的。到底是什么意思?
Java中的“ final”关键字如何工作?(我仍然可以修改对象。...
“loop:”在Java代码中。这是什么,为什么要编译?
java.lang.ClassNotFoundException:sun.jdbc.odbc.JdbcOdbc...