3D 艺术家 SouthernShotty 将于本周做客“NVIDIA Studio 创意加速”栏目,展示 Adobe Firefly 的生成式 AI 功能。
编辑注:本文是我们每周发布的 NVIDIA Studio 创意加速系列栏目的一部分,该系列旨在介绍一些特邀艺术家、提供创意提示和技巧,并展示 NVIDIA Studio 技术如何改善创意工作流。我们还将深入探讨全新GeForce RTX 40 系列 GPU的性能、技术和资源,以及它们将如何显著加速内容创作。
NVIDIA 和 Adobe 带头推动内容创作者使用 AI 功能,帮助自动化重复流程并简化繁重任务。
这些技术以线上和线下结合的形式在 Adobe MAX 上展示,这一大会持续至 10 月 12 日(星期四)。您可以从领先的 Adobe 专家那里获得灵感,例如“NVIDIA Studio 创意加速”栏目之前介绍的艺术家 Karen X. Cheng。
https://images.nvidia.cn/cn/youtube-replicates/7RnbPP6VdbE.mp4
Adobe 发布的 Adobe Firefly 将生成式 AI 的力量交到了创作者手上。借助 NVIDIA GPU,Adobe 释放出生成式 AI 的增强功能并惠及数百万用户,为希望加速生成式 AI 的艺术家以及其他人带来新的机遇。Firefly 目前可以作为独立应用使用,也可以与其他 Adobe 应用集成使用。
Adobe 最热门应用(包括 Adobe Premiere Pro、Lightroom、After Effects 和 Substance 3D Stager、Modeler 和 Sampler)的近期更新为创作者带来了全新 AI 功能。GeForce RTX 和 NVIDIA RTX GPU 有助于加速处理这些应用和 AI 特效,从而节省大量时间。
在Premiere Pro中,视频剪辑师可以使用 AI 助力的增强语音(测试版)功能来提高对话质量,还可以在GPU的加速下更快解码 ARRIRAW 相机原始数字影像,与 Apple MacBook Pro 16 M2 Max 相比,在采用 RTX GPU 的 Premiere Pro 上解码的速度至高可提升 60%。此外,After Effects 中现已提供的新一代 Roto Brush(3.0 版本)功能,可用于提高转描质量。
Lightroom 现在可以为摄影师和 2D 艺术家提供新的“镜头模糊”和“Point Color(点着色)”效果,以完善正在进行的神经网络滤镜优化,从而提高了“选择物体”、“选择人物”和“选择天空”功能的性能。
这些高级功能借助 NVIDIA Studio 驱动获得进一步强化,提升了性能和可靠性,可供 RTX GPU 用户免费使用。Studio 驱动 10 月版本现已可供下载。
最后,3D 艺术家 SouthernShotty 再次做客“NVIDIA Studio 创意加速”栏目,分享他混合了多个手工打造的精美世界而创作的 3D 蒙太奇影片。该作品借助 Adobe 应用和 Blender 构建,其 AI 驱动的工作流由 GeForce RTX 4090 笔记本电脑 GPU 加速。
挥洒你的创意
Adobe Creative Cloud 和 Substance 3D 应用在 NVIDIA RTX GPU 上拥有更快的运行速度,并且最近的更新展示出该产品省时高效的性能还在不断提升。
测试基于采用 第 13 代英特尔酷睿 i9 并搭载 GeForce RTX 4050 和 4090 笔记本电脑 GPU 的 NVIDIA Studio 设计本; 搭载 M2 Pro 的 14 英寸 MacBook Pro;以及搭载 M2 Max 的 16 英寸 MacBook Pro。 性能测试用于测量在 Adobe Premiere Pro 中对视频片段应用增强语音效果的总时长。
Premiere Pro 的“增强语音”(测试版)功能目前处于测试阶段,它使用 AI 降噪并提高对话剪辑片段的质量,使其听起来像是专业录制。与配备 M2 Max 的 MacBook Pro 16 相比,GeForce RTX 4090 笔记本电脑 GPU 处理任务的速度高达8倍。
测试基于采用 第 13 代英特尔酷睿 i9 并搭载 GeForce RTX 4050 和 4090 笔记本电脑 GPU 的 NVIDIA Studio 设计本; 搭载 M2 Pro 的 14 英寸 MacBook Pro;以及搭载 M2 Max 的 16 英寸 MacBook Pro。 性能测试用于测量在 Adobe Premiere Pro 中应用导出 ARRIRAW 素材的总时长。
ARRIRAW 素材具有唯一能够完全保留相机自然色彩响应并提供出色曝光宽容度的格式,可供 Premiere Pro 专业人士使用。与配备 M2 Max 的 MacBook Pro 16 相比,GeForce RTX 4090 笔记本电脑 GPU 导出 ARRIRAW 视频的速度提高至 1.6 倍。
此外,After Effects 用户还可以使用处于测试阶段的新一代 Roto Brush 功能。该功能由全新的 AI 模型提供支持,非常适合用来更轻松地分离重叠的四肢、头发和其他透明物等,从而节省时间。
RTX GPU 在 3D 工作负载中表现出色。Substance 3D Stager 的全新 AI 支持、GPU 加速降噪器为视窗带来了交互式、逼真的渲染和建模。
Substance 3D Modeler 捕捉模式下最新的硬件光线追踪功能使用 NVIDIA 技术,导出高质量屏幕截图的速度是以前的 2.4 倍。
同时,Substance 3D Sampler 的 AI UpScale 功能可增加低质量纹理的细节,其图像转材质功能使您可以更轻松地使用源图像中的材质和纹理。
Adobe Lightroom 的镜头模糊效果
摄影师长期以来一直使用 Photoshop 广受欢迎的超分辨率功能,与 MacBook Pro 16 M2 Max 相比,该功能在 GeForce RTX 4090 笔记本电脑 GPU 上的性能提高至 3 倍。现在,Lightroom 为用户提供 AI 驱动的功能,包括用于应用逼真镜头模糊效果的镜头模糊功能、用于准确调整颜色以加速颜色校正的 Point Color(点着色)功能,以及用于在 HDR 色彩空间中进行编辑和渲染的高动态范围输出。
Adobe Firefly 焕发光芒 #76B900
Adobe Firefly 利用云端的 NVIDIA GPU 为用户提供生成式 AI 功能。
https://images.nvidia.cn/cn/youtube-replicates/f_2KsIwoV4Q.mp4
Firefly 的功能有助于用户在 Adobe Photoshop 中立即完成任务。例如,Firefly 中的“生成式填充”功能可用于在 Photoshop 中添加、删除和扩展内容,而“生成式扩展”功能可用于扩展场景。
Adobe Photoshop 中由 Adobe Firefly 提供支持的生成式填充功能。
Adobe Illustrator 提供“生成式重新着色”功能,使图形设计师能够在工作中探索各种各样的颜色、色调搭配和主题,而无需手动进行繁琐的重新着色。现在只需几秒钟即可获得出色的颜色组合。
Adobe Illustrator 中由 Adobe Firefly 支持的生成式重新着色功能。
Adobe Express 提供“文本生成图像”功能,可根据标准提示词创造出极为精彩的图像,而“文本效果”功能可对标准文本进行风格化处理,用以创建宣传单、简历、社交媒体短视频等。
这些强大的 AI 功能在开发时已将创意社区纳入考量,它们以内容和数据透明的 AI 道德原则作为指导,确保在输出的作品符合伦理和道德要求。
当摄影师、插画师、设计师、视频剪辑师、3D 艺术家等可以使用 Adobe Firefly 驱动的新功能时,NVIDIA 技术将继续从云端为这些功能提供支持。
畅享 AI 体验
独立电影制作人兼艺术家 SouthernShotty 清楚独自制作内容所面临的挑战,以及这个过程之艰巨。
SouthernShotty 的艺术作品以令人赞叹的视觉效果唤起童真情感。
因此,SouthernShotty 一直在寻找工具和技术来简化创意工作流。为了加速工作流,他将由 GeForce RTX 4090 GPU 加速的新 Adobe AI 功能组合在一起使用,效率惊人。
这位艺术家的 3D 模型相当简单,他专注于打造纹理,以确保世界符合他的愿景。他使用自己最喜欢的一项功能,即由 AI 驱动的 Adobe Substance 3D Sampler,来将图像转换为基于物理效果的渲染纹理。
“NVIDIA Studio 驱动增强了稳定性和可靠性,我非常喜欢它提供的支持。”
- SouthernShotty
在 Blender 中应用纹理。
SouthernShotty 可以在 Substance 3D Painter 中应用这些纹理,以实现预期的视觉效果。随后,RTX 加速的光线和环境光遮蔽烘焙功能会在几秒内完成素材优化。
当他在视窗中使用 Blender Cycles 由 RTX 加速的 OptiX 光线追踪技术进行交互式逼真渲染时,其 RTX GPU 不断发挥着至关重要的作用。
“它的速度太快了,我几乎可以实时预览整个场景,并在点击渲染按钮之前看到最终结果。” - SouthernShotty
https://images.nvidia.cn/cn/youtube-replicates/uzzHT12pIVE.mp4
随着 3D 蒙太奇画面推进,主角在几个新环境中反复出现。每个新地点的展示时间只有一两秒,但 SouthernShotty 仍然需要为每个地点构建细致充实的环境。通常这会花费大量时间,但 Adobe Firefly 的 AI 辅助帮助加快了这一进程。
Adobe 秉持以创作者为中心的理念,致力于负责任地开发生成式 AI。
SouthernShotty 打开应用,输入文字提示“奇幻蘑菇森林”,然后通过对数字艺术、黄金时段(例如灯光和广角设置)进行微调,以获得理想的构图。对结果感到满意后,他下载图像,以便在 Photoshop 中进行后续编辑。
由 GeForce RTX GPU 提供支持的 Adobe Firefly 在几分钟内即可生成全新图像。
之后,SouthernShotty 会使用 AI 驱动的生成式填充功能来删除不需要的背景元素。他使用神经网络滤镜优化来对背景中添加的城堡元素进行颜色匹配,然后再次使用生成式填充功能轻松将城堡与树木合成在一起。
最后,SouthernShotty 在新的镜头模糊功能中使用神经网络滤镜优化来增加场景的纵深感,他首先将深度层导出为单独的图层,然后在 Blender 中进行编辑以完成场景。
在 Blender 中编辑深度图。
SouthernShotty 说:“我在整个流程中随处都会用到 GPU 加速和支持 AI 的功能。在 Blender 中,GeForce RTX 4090 GPU 会在方方面面提供加速,而在视窗中的实时渲染视图中提供加速对于场景的可视化尤其重要。”
请在微博、哔哩哔哩,以及微信上关注 NVIDIA Studio 的官方帐号,您还可以在抖音上观看教程并通过订阅 NVIDIA Studio 新闻通讯从收件箱中了解最新资讯。