如何实现低延迟的n对n音频聊天

Question

我正在研究如何实现n对n音频聊天（因此，可以说4人互相听到对方）。这是使用Flash或Wowza媒体服务器相当微不足道。 real问题是延迟，因为聊天中的4个人必须尽可能地同步（例如，像唱歌一样）。每毫秒都很重要。

您对超低延迟音频聊天有什么经验？

• 可实现的最低延迟是多少？
• 你如何实现它（哪个软件，协议，媒体服务器，比特率）？

非常感谢！

Answer 1

可实现的最低延迟取决于您的代码无法控制的许多因素，主要涉及您的网络。

现在，如果我是做这个项目的人，我会看到什么算法和协议可用于时钟同步。一旦你这样做，每个主机应该只是发送时间戳包到服务器。在服务器端，您可以以某种方式组合这些数据包（可能是每个机器的某个时隙的位或全部字节），然后通过多播将它们再次发送出去。

问题是，即使你的代码有问题......你没有办法可靠地将这些数据包实时地发送到服务器。 UDP将丢弃数据包，并且你必须建立一个宽容的接受迟到或不显示。 TCP在这方面并不好。当然，这些数据包保证按顺序到达，但时间是多少？另外，为了压缩每个主机的声音，然后在服务器上解压缩，进行合并并重新压缩，同时保持实时声音非常雄伟的感觉。

我并不意味着被认为是一个专家，也没有任何经验做这种事情，但它只是声音艰难。