Adobe为其Adobe Premiere Pro视频编辑软件带来了新功能,包括字幕翻译和通过描述搜索视频的能力。
Adobe Premiere Pro现在可以识别视频中的物体、地点、摄像角度等,但目前尚未识别或标记人物(暂时)。您只需简单描述视频内容,即可通过新的搜索面板在您的库中找到视频。例如,您可以使用简单的搜索关键词,如“加利福尼亚”,或者使用自然语言进行更复杂的查询,比如“一个带有镜头光晕的滑冰人”或“一个带有镜头光晕的滑冰人”,该功能会找到与描述匹配的剪辑部分或相关范围。
如果您在Adobe Premiere Pro中编辑许多视频,这一功能将节省您大量时间,因为它能避免您手动查看视频以找到合适的素材。该功能利用了Adobe称为“媒体智能”的人工智能计算机视觉算法。公司表示,媒体智能目前仅识别视觉内容,而不包括声音。它也不使用光学字符识别,因此无法在画面中找到特定的文本。
该应用还可以在视频文件附带有转录本时找到说话的内容。由于媒体智能也能分析元数据,您还可以根据GPS位置信息、相机类型、拍摄日期以及嵌入元数据中的其他信息找到视频。
Adobe的FAQ页面表示,隐私得到保障,因为所有的媒体智能处理都在设备上进行。不会有任何内容上传到云端,且媒体智能工作不需要互联网连接。您的内容不会用于训练Adobe的模型。Adobe Premiere Pro现在还可以自动将字幕翻译成17种语言,并且可以同时显示多个字幕轨道。视频通过AI语音转文本技术进行实时转录,之后您可以直接从转录本中编辑视频。
Adobe并不是唯一将AI能力引入视频编辑领域的公司。苹果的FinalCutPro软件最近获得了自动创建闭字幕的功能,使用大型语言模型转录语音。微软的Clipchamp视频编辑器也有类似功能,您可以通过使用文本转录本而不是通常的时间轴来编辑视频。
新的搜索面板、字幕翻译以及其他改进功能今天已在Adobe Premiere ProBeta版本中推出。要运行Beta版本,您需要拥有有效的CreativeCloud或Adobe Premiere Pro订阅。那些不希望安装Beta版本的CreativeCloud订阅者可以在这些功能正式发布给所有用户时使用它们。
Adobe还宣布了对AfterEffects和Frame.io的改进。Frame.io是其基于云的视频协作平台,现在支持佳能的C80和C400相机。AfterEffects具有一个新的缓存系统,应该能够消除在较慢的计算机上暂停播放以进行缓存或渲染的需求。该应用现在支持通过校准的参考显示器进行PQ和HLG视频的HDR监视。您可以在AfterEffectsBeta版本中尝试这些改进。