编者注:本文属于《解码 AI》系列栏目,该系列的所在是让时候愈加简便易懂村上里沙作品及图片,从而解密 AI,同期向 NVIDIA RTX PC 和责任站用户展示全新硬件、软件、器具和加快特性。
AI 为遐想限度带来了深切的改造。固然最近的焦点是生成式 AI,但多年来,由 NVIDIA RTX 提供援救的 AI 加快器具也在改善游戏、本体创作和责任遵守方面起到了要津作用。
NVIDIA Broadcast 愚弄圭表即是一个例子,它可使用腹地 RTX GPU 上的 Tensor Core 不拒绝地进步音频和视频质地。通过将这款愚弄与 GeForce RTX 和 NVIDIA RTX GPU 内置的 NVIDIA 编码器 (NVENC) 搭配使用,您可松驰上手直播,或在视频会议通话中尽展专科风仪。
助力杀青“直播梦”
https://images.nvidia.cn/cn/youtube-replicates/viWuC4MMXWc.mp4
一直以来,要杀青高质地的直播,就离不开兴奋硬件的援救。很多主播常用 x264 软件库的软件 CPU 编码,而这无间会影响游戏质地。这便导致很多主播使用双 PC 设立:一台 PC 专注于游戏和本体,另一台认真串流编码。这种设立拼装起来很复杂,还很难进行故障打消,况且其价钱关于新东说念主主播来说无间过于兴奋。
NVENC 可应酬上述问题。它是 NVIDIA GPU 上的专用硬件编码器,认真处理音视频编码,以便开释系统的其余部分来专注于游戏和本体的性能。Open Broadcaster Software (OBS) 等行业当先的直播愚弄正在添加对 NVENC 的援救,为 Twitch 和 YouTube 等热点平台上的新一代主播铺平说念路。
同期,NVIDIA Maxine 还可匡助处置竖立兴奋的问题。它包含免费的 AI 赋能功能,举例假造绿幕和基于汇集录像头的增强执行跟踪。有了这些功能,用户便无需使用物理绿幕或作为捕捉套件等特殊竖立。主播们在 2019 年的 TwitchCon 大会上初次体验到了上述绿幕时候,他们使用 GeForce RTX 2080 GPU 上的 AI 加快绿幕,在展厅中现场测试了该绿幕在 OBS 上的恶果。
Maxine 的 AI 赋能恶果最初在 RTX Voice 测试版中向 RTX 用户开放,随后又在名为 NVIDIA Broadcast 的寂寞愚弄中提供。
探索 NVIDIA Broadcast
https://images.nvidia.cn/cn/youtube-replicates/_kHFTeL1RVU.mp4村上里沙作品及图片
NVIDIA Broadcast 提供种种 AI 赋能功能,可进步各式用例中的音频和视频质地。它易于使用,适用于任何其他愚弄,况且设立起来颠倒简便。
这款愚弄包含:
● 杂音和回声移除:只需点击一个按钮,即可让 AI 排斥麦克风和输入音频中满盈的布景噪声。
● 假造布景:通过布景去除、替换和迷糊处理等功能,用户无需使用价钱不菲的竖立或复杂的照明派遣即可自界说布景。
● 眼光战斗:AI 可让主播看起来像是在直视录像头,即使他们正在看向别处或记条记。
● 自动聚焦:及时动态跟踪对象的出动,不管出动对象位于那处,均可自动编订和缩放画面,以跟拍对象。
● 虚光恶果:AI 可对录像头图像的边缘愚弄暗化恶果,以提供显著的视觉对比,从而将不雅众的珍办法劝诱到视频中央,同期增添作风特点天天影视下载。
● 视频降噪:排斥弱光环境下的视频噪点,使画面更了了。
NVIDIA Broadcast 时候的责任旨趣是在 Windows 中创建假造录像头、麦克风或扬声器,这么用户只需设立一次竖立即可在职何直播、视频会议或语音聊天愚弄(包括 Discord、Google Meet、Microsoft Teams、OBS Studio、Slack、Webex 和 Zoom)中使用这些竖立。
NVIDIA GeForce RTX、TITAN RTX、NVIDIA RTX 或 Quadro RTX GPU 用户可使用其 GPU 专用的 Tensor Core 协助 NVIDIA Broadcast 的 AI 汇集及时入手。
NVIDIA Broadcast 时候中的总计 AI 赋能时候也能以软件设备套件的体式提供给愚弄设备者。视听时候公司 Elgato 在其 Wave Link 软件中添加了 Maxine 的 AI 音频噪声移除时候,而 VTube Studio (一款热点愚弄,用于将 3D 模子相连到汇集录像头,以便使用动画变装进行直播) 则提供了不错免费下载的经 RTX 加快的模子跟踪器插件。寂寞设备者 Xaymar 在其 VoiceFX 插件中使用了 NVIDIA Maxine。
在使用 Adobe Premiere Pro 等视频编订套件或 Ableton Live 及 Adobe Audition 等数字音频责任站进行后期处理时,本体创作家不错使用 VoiceFX 插件或 Elgato 的假造责任室时候 (VST) 过滤器排斥录制本体中的噪声和回声。
耳听
自 NVIDIA Broadcast 发布以来,已罕见百万东说念主使用了这款愚弄。
Twitch 有名主播 Mr_Vudoo 默示:“我最常使用的是视频降噪和布景替换功能。眼光战斗功能颠倒旨趣,憨厚说,这项功能的恶果让我感到惊喜。”
YouTube 频说念 PiXimperfect 的主执东说念主 Unmesh Dinda 在顶点情境下演示了 NVIDIA Broadcast 的噪声排斥和回声移除 AI 功能。他将一台呼呼作响的电电扇正对麦克风,还戴上面盔并让东说念主执续敲击头盔。即便布景中充斥着很大的噪声,在盛开 NVIDIA Broadcast 愚弄的杂音排斥功能后,Dinda 的声息已经了了可闻。这段视频的不雅看次数已向上 1200 万次。
https://images.nvidia.cn/cn/youtube-replicates/bEurXLfzXfw.mp4
关于日益增多的良友责任主说念主员来说,NVIDIA Broadcast 愚弄亦然一款实用的器具。Tom’s Hardware 网站的总编 Avram Piltch 在一篇著作中详备先容了他对这款愚弄的降噪功能的测试,测试对象包括呼呼作响的空调、修剪草坪的邻居,乃至一个发秉性挥舞着机器东说念主的孩子。NVIDIA Broadcast 的 AI 音频恶果每次齐能大显技艺:
Piltch 默示:“我让我八岁的孩子在我死后假装发秉性,当我启用噪声移除功能后,每一声‘我不去睡眠’的衔恨齐散失了(至少在录制本体中是这么)。为了加多挑战性,咱们让他一边发秉性,一边拿着一辆嗡嗡作响的机器东说念主汽车走来走去。这一次,NVIDIA Broadcast 已经移除了总计满盈的声息。”
NVIDIA Broadcast 的 AI 赋能布景去除功能也不错在浅显情境中说明作用,举例与医疗专科东说念主员进行视频通话。
接待在职何搭载 RTX 的台式电脑或条记本电脑上免费下载 NVIDIA Broadcast。
请订阅《解码 AI》局势通信,咱们每周齐会将极新资讯奏凯送达到您的收件箱。
###村上里沙作品及图片
中国人体艺术