NVIDIA Maxine平台将视频通话带宽消耗降低10倍
NVIDIA旨在解决互联网上最重要的流量和视频流内容,这些可能只有视频会议平台需要。
NVIDIA Maxine是一个云原生流媒体视频AI平台,服务提供商可以将其新的AI支持功能带入预计每天举行的3000多万场Web会议中。
在云中的NVIDIA GPU上运行该平台的视频会议服务提供商,可以为用户提供全新的AI效果——包括人脸对齐(你好像面对着摄像头)、凝视矫正(即使摄像头没有对齐也可以模拟眼神接触)到屏幕)、超分辨率、降噪、人脸重光照等等。
其他可能性包括动画化身,具有由您的声音和情绪语调实时驱动的逼真动画,以及自动取景,其中即使有人离开屏幕,视频输入也可以跟随扬声器。
数据是在云中而不是本地系统中处理的,所以您可以享受所有新添加的功能,而对客户端系统没有任何新的要求。
除了最重要的新功能,NVIDIA Maxine还承诺通过使用AI分析通话中每个人的主要面部表情,为另一端的观众重新创作视频动画,从而节省大量带宽。与每帧传输整个像素屏幕相比,这使得视频会议能够在互联网上传输更少的数据。
结合在NVIDIA GPU上运行的新视频压缩算法,带宽消耗降低到通常的H.264流视频压缩标准的十分之一。最终,这意味着服务提供商的成本将大大降低,接收端的视频会议体验将更加流畅。
Maxine平台集成了几种NVIDIA AI SDK和API技术。除了NVIDIA Jarvis,Maxine平台还采用NVIDIA DeepStream高吞吐量音视频流SDK和NVIDIA TensorRT SDK进行高性能深度学习推理。玛克辛平台的AI音频、视频和自然语言功能是通过在英伟达DGX系统上的数十万次培训开发出来的。
NVIDIA Maxine平台现已可供创建音频和视频应用程序和服务的计算机视觉AI开发人员、软件合作伙伴、初创企业和计算机制造商早期使用。目前公认的云服务有谷歌云、亚马逊AWS、腾讯云、甲骨文、微软Azure。
在相同的协作主题上,对于3D设计内容协作者和数字艺术家来说,我们去年报道的NVIDIA的Omniverse现在可以在公共Beta版中使用。
郑重声明:本文版权归原作者所有。转载文章只是为了传播更多的信息。如果作者信息标注有误,请第一时间联系我们修改或删除。谢谢你。
标签:NVIDIA Maxine。