Adobe 将通过由 NVIDIA 云端技术提供支持的 Adobe Firefly 将生成式 AI 交到创作者手中。此外,Adobe 将为其令人惊叹的系列应用添加令人兴奋的全新功能。

增强语音是一款由 NVIDIA RTX 加速的 AI 赋能工具,即将在 Adobe Premiere Pro 中推出。这项新功能可以消除多余的噪音并提高对话片段的质量,使其听起来像是专业录制。

Esteban Toro 是 Adobe 的高级社区关系经理,也是本周“NVIDIA Studio 创意加速”的特邀艺术家。他能够熟练运用 Adobe Photoshop 和 Lightroom 中的 AI 赋能功能,并借此创作出了感人至深的 Cinematic Portraits 系列作品。

抢先一睹 Toro 的精彩作品。

Chat With RTX — 这款技术演示应用可让 GeForce RTX 用户个性化设置预训练的生成式 Transformer 大语言模型并关联自己本地的内容进行对话(无论是文档、笔记、视频还是其他数据格式)。由于这款应用运行在本地 Windows RTX PC 或工作站上,因此既快速又安全。立即下载 Chat with RTX

别忘了,GTC 大会现已开放报名,支持线上或线下参加。GTC 大会将于 3 月 18 日至 21 日在加利福尼亚州圣何塞举行,该活动所涉及的内容将覆盖各个技术水平和兴趣领域,甚至包含有关如何使用 OpenUSD 和生成式 AI 推动内容创作的会议

此外,“Omniverse OpenUSD 月”即将开始,该活动将重点展示用于在 3D 世界中进行描述、组合、模拟和协作的开放式可扩展生态系统。请在微博哔哩哔哩,以及微信上关注 NVIDIA Studio 官方账号,了解更多信息。

借助 Adobe AI 和 RTX 讲述精彩故事

对于才华横溢的 Toro 来说,故事是他进行创作的原动力。

Toro 的创意工作流以故事为动力。

Toro 表示:“每个人的成长经历都各不相同,人们所作出的决定又会不断改变他们的境遇,了解这其中的点点滴滴无疑是一件鼓舞人心的事。当我发现一个值得讲述的故事时,我就会觉得有必要把它原原本本地讲述出来。”

正是这些故事催生了 Cinematic Portraits 系列作品,这是一个照片和视频合集,其中的主角是 Toro 所结交的友人,这里面有一位现年 81 岁的韩国画家,名为 Kim Nam Soon。这位画家在 65 岁时才学习绘画,其事迹令人印象深刻。

Toro 会花费大量时间来制定完备的计划。首先,他会与故事的主角对话,确保对方充分了解整个项目,并在此过程中拉近双方的关系,进而让对方放松下来,自在地分享真实的经历。这是他重新讲述他人故事的不二法门。

他会使用哈苏和索尼相机为主角拍摄视频和照片。然后,他会使用由 GeForce RTX 和 NVIDIA RTX 技术加速的 Adobe 应用进行后期制作。

Toro 使用增强语音工具来提高录音的清晰度和质量,并使用 Mix Amount 设置来调整增强级别(两者均由 AI 提供支持)。与 RTX 3080 Ti 相比,增强语音功能在 GeForce RTX 4090 笔记本电脑 GPU 上的速度提升了 75%。

Toro 表示:“如果没有 AI,在不太便于录音或嘈杂的环境下拍摄的视频片段都只能作废。”

通过 Premiere Pro 中基于文本的编辑工具,Toro 可使用语音转文本 AI 功能来为视频片段自动创建字幕(支持 18 种语言),从而加速编辑过程。

基于文本的编辑工具可为视频序列创建转录文稿并添加字幕。

Toro 还使用了填充词检测功能来检测并删除填充词和停顿,使转录文稿变得更加准确明了。填充词不受语种影响,因此填充词检测功能适用于基于文本的编辑工具支持的所有语言 (18 种)。

Adobe 专家 Esteban Toro 正在努力工作。

Adobe 具有多种省时高效的功能。例如,AI 赋能的 Auto Reframe 工具可通过项目模板的比例预设,自动将项目编辑为适用于不同社交媒体的多种尺寸格式。Toro 的 NVIDIA Studio 设计本搭载 GeForce RTX 4070 显卡,可加速这些强大工具。

得益于 GPU 加速的 NVIDIA 视频编码器 (NVENC),最终文件的导出速度是单独使用 CPU 时的 4 倍。Toro 轻松地在 Photoshop Lightroom 中快速进行了最后的润色,他使用 RTX 加速、AI 赋能的 Raw 增强细节功能来优化高分辨率 RAW 图像的色彩细节,并使用超分辨率功能来提高图像质量。相比于传统方法,使用超分辨率功能可获得质量更高的图像。

Toro 表示:“在拍摄高画质视频时,基本上都得为视频项目配备专用 GPU。使用 NVIDIA GPU 可以让我渲染和处理项目的速度变得更快,后期处理工具能够完全为我的创意服务。我可以完全按照自己的想法进行创作,不会受到计算机性能的限制。”

艺术家兼 Adobe 专家 Esteban Toro。