NVIDIA RTX Broadcast Engine将AI增强功能带到了直播中

2022-04-05 00:32:39
导读 如果您可以使用现有网络摄像头进行Livestream或录制并在没有实际绿屏的情况下实现全屏绿屏效果,该怎么办?这是NVIDIA计划借助其新的NVIDIA

如果您可以使用现有网络摄像头进行Livestream或录制并在没有实际绿屏的情况下实现全屏绿屏效果,该怎么办?这是NVIDIA计划借助其新的NVIDIA RTX Broadcast Engine以及OBS和其他产品跨越的障碍之一。已经有网络摄像头和软件试图做到这一点,但是它们大多是由于奇异的伪像而错过了,并最终落空了,但是NVIDIA的不同之处在于,它们在其RTX显卡阵容中利用了Tensor Cores,并且将AI加速器可通过其RTX广播引擎以多种不同方式使用。

RTX Greenscreen,可实时删除网络摄像头供稿,因此只有您的脸和身体才会出现在直播中。RTX Greenscreen AI模型可以了解图像的哪一部分是人的,哪些是背景,因此游戏玩家无需购买就可以享受绿屏的好处。

RTX AR可以检测面部,跟踪诸如眼睛和嘴巴之类的面部特征,甚至可以对面部表面建模,从而可以使用标准网络摄像头现实时增强现实效果。开发人员可以使用它来创建有趣的引人入胜的AR效果,例如将3D内容叠加在脸上或允许人用自己的脸部控制3D角色。

RTX样式过滤器,它使用一种称为样式转换的AI技术,可以根据另一幅图像的样式来转换网络摄像头源的外观。通过按热键,您可以使用自己喜欢的绘画或游戏美术来设置视频源的样式。

NVIDIA已与OBS合作,将其RTX Greenscreen正确地集成到OBS中,并将在TwitchCon上向在场的人展示它,以期在接下来的几个月中向公众推出RTX Greenscreen之前,希望能看到它的有效性。

除了RTX广播引擎,我们最近还看到了一些顶级软件团队推出了对新的NVIDIA Video Codec SDK的支持。Elgato已将其用于其新的4K60 Pro MK2采集卡和Discord,以及直接从其应用程序进行的游戏流媒体。另一个重要的集成是通过Twitch自己与他们的TwitchStudio一起实现的,我也刚刚访问了TwitchStudio,并将在未来几天内访问它。

看到NVIDIA找到新的有用的方法来利用RTX卡带来的硬件功能一直是而且仍然很有趣,并且当这些功能可用时亲自检查其中的一些功能将很有趣。

免责声明:本文由用户上传,如有侵权请联系删除!