NVIDIA Broadcast通过AI驱动功能增强直播和远程工作
realtime news Jun 27, 2024 03:53
NVIDIA Broadcast应用程序利用AI和RTX GPU提供专业质量的音频和视频，提升直播和远程工作的体验。
NVIDIA推出了最新版本的Broadcast应用程序，旨在通过先进的AI驱动功能提升直播和远程工作的质量。根据NVIDIA博客的介绍，这款免费应用程序利用RTX GPU上的Tensor Cores来提供专业级别的音频和视频增强。
流媒体的梦想
历史上，高质量的直播往往需要昂贵的硬件配置，通常需要双PC配置来分别处理游戏和编码任务。NVIDIA Broadcast通过利用NVENC（NVIDIA GPU上的专用硬件视频编码器）改变了这种局面，它处理编码任务，使系统的其余部分能够保持最佳性能。这项创新得到了流行的直播应用程序如Open Broadcaster Software（OBS）的支持，使得像Twitch和YouTube这样的平台上的新一波主播成为可能。
此外，NVIDIA Maxine提供了免费AI驱动的功能，如虚拟绿屏和基于网络摄像头的增强现实跟踪，消除了对昂贵物理设备的需求。这些功能在2019年TwitchCon上首次亮相，现已整合到NVIDIA Broadcast应用程序中。
现在展示：NVIDIA Broadcast
NVIDIA Broadcast提供了一套AI增强功能，旨在提高各种用例的音频和视频质量。主要功能包括：
- 噪音和回声消除： AI消除麦克风和输入音频中的不需要的背景噪音。
- 虚拟背景：功能如背景移除、替换和模糊，使用户无需昂贵设备即可自定义背景。
- 眼神接触： AI使得角色看起来像是在直接看摄像头，即使他们没有。
- 自动框架：动态跟踪运动并自动裁剪和放大移动物体。
- 暗角：在摄像机图像的角落应用暗化效果，以获得视觉对比和风格感。
- 视频噪声消除：在低光条件下清除视觉噪声，提供更清晰的图像。
该应用程序在Windows中创建了虚拟相机、麦克风或扬声器，使用户可以一次性设置设备并在多个应用程序中使用，包括Discord、Google Meet、Microsoft Teams、OBS Studio、Slack、Webex和Zoom。NVIDIA Broadcast的AI网络在NVIDIA GeForce RTX、TITAN RTX、NVIDIA RTX或Quadro RTX GPU上的专用Tensor Cores上实时运行。
NVIDIA Broadcast背后的技术也作为软件开发工具包提供给应用程序开发人员。像Elgato这样的公司和独立开发人员已经将这些AI功能整合到他们的产品中，进一步扩展了NVIDIA AI进步的覆盖范围和实用性。
(不)听即相信
自发布以来，NVIDIA Broadcast已获得广泛采用。Twitch名人Mr_Vudoo和YouTube主持人Unmesh Dinda都称赞了该应用程序的功能。Dinda在极端条件下演示了该应用程序的降噪功能，即使在高噪音背景下，它仍然有效。Tom's Hardware主编Avram Piltch也测试了该应用程序，确认了其过滤各种环境声音的能力。
NVIDIA Broadcast对远程工作也有益。它通过提供背景移除等功能增强了视频通话，在专业设置中受到用户的好评。
了解更多信息并下载应用程序，请访问NVIDIA Broadcast页面。
Image source: Shutterstock