EBU与英伟达扩展主权框架,Adobe Frame.io用GPU加速视频语义搜索
在欧洲广播联盟与英伟达将主权云、开放模型和集成商纳入其广播机构AI部署标准的同时,Adobe在柏林活动上演示了基于英伟达加速计算的Frame.io视频搜索管线,称嵌入生成速度提升约5倍。
AI解读:这次扩展的重点是部署条件:EBU与英伟达去年提出的主权标准,现在引入主权云提供商、开放模型开发者和系统集成商,明确智能体在何处运行、数据如何治理、由哪些模型驱动服务,以及系统全生命周期的安全要求。适用对象是EBU成员广播机构;EBU称其在55个以上国家拥有115家以上成员组织。
英伟达博客给出的性能数字只针对Adobe的搜索管线:使用NVDEC解码、TensorRT推理和CUDA做预处理与嵌入生成,称嵌入生成约快5倍、吞吐最高提升4倍、搜索处理延迟最高降低5倍。这些是厂商在活动上公布的数据,没有第三方评测。
新引入的每秒两帧代理文件比其替代的360p版本小约80%。英伟达称这能降低存储与传输开销,同时保留搜索所需的视觉细节,但未给出画质或检索准确率的对比数据。
实施分工已在博客中列出:微软提供Azure Local和Foundry Local以支持本地处理敏感素材,Nebius提供在欧洲基础设施上训练和运行自有模型的平台,Qvest等集成商负责让参考架构可部署。以上为参与方对合作内容的说明。
英伟达博客称,在柏林举行的一场由Adobe、贝塔斯曼、英伟达和UFA合作主办的创意产业活动上,欧洲广播联盟(EBU)宣布与英伟达合作,扩展其为欧洲公共广播机构制定的主权框架,纳入云服务商、开放模型开发者和集成伙伴。
同一活动上,Adobe表示正使用英伟达加速计算提升Frame.io的视频搜索能力,德国影视制作公司UFA已用于查找素材中的特定片段。
EBU主权框架新增云、模型与集成伙伴
EBU与英伟达正在扩展双方去年为欧洲公共服务媒体提出的主权标准。英伟达博客称,该计划现在引入主权云提供商、开放模型开发者和系统集成商,为广播机构部署智能体定义要求与参考架构,覆盖工作负载运行位置、数据治理方式、服务所用模型,以及系统整个生命周期的安全。
EBU称自己是全球主要的公共服务媒体联盟,在55个以上国家拥有115家以上成员组织,覆盖超过10亿人。博客称,随着智能体进入新闻编辑室、制作和受众服务,广播机构需要保护编辑独立性、数据主权和国家韧性。
具体分工上,微软将提供Microsoft Sovereign Cloud相关能力,包括Azure Local和Foundry Local,使广播机构能在本地处理敏感编辑素材,并在外部连接中断时维持关键服务;Nebius提供平台,供广播机构在欧洲基础设施上训练、微调和运行自有模型;英伟达Nemotron开放模型作为可供定制的基础,用于本地语言、档案和编辑政策;Qvest等集成商提供媒体行业咨询与系统集成,使参考架构可用于实际广播环境。
EBU首席技术和创新官Antonio Arcidiacono在博客中说,这些标准为EBU成员提供共同基础,以增强韧性、保持控制,并提供可问责的高级服务以维持受众信任。France Télévisions首席执行官、EBU主席Delphine Ernotte称,主权云基础设施和开放模型可帮助欧洲公共服务媒体创新,同时保护数据、编辑独立性和文化多样性。
Adobe Frame.io:GPU加速搜索与更小的代理文件
Adobe在活动上介绍,其GPU加速搜索管线使用英伟达NVDEC进行视频解码、TensorRT优化AI推理、CUDA平台做预处理和嵌入生成。英伟达博客称,结果是嵌入生成速度约提升5倍、吞吐最高提升4倍、搜索处理延迟最高降低5倍。
Adobe还在推进GPU加速的媒体导入,使用NVENC和NVDEC加速视频编解码。博客称,一种新的每秒两帧代理文件比它替代的360p版本小约80%,以减少存储和传输,同时保留搜索所需的视觉细节。
英伟达博客称,UFA每年交付超过3500小时节目,包括日播剧《Gute Zeiten, schlechte Zeiten》。编辑制作回顾或闪回时,可能需要用到15年前某个特定反应或未解决的对话,文件名和文件夹无法定位这类内容。Frame.io的语义搜索可按概念、动作或场景查找视频内片段,混合搜索再加入笔记、转录文本和审批状态;编辑可以搜索“一个神情担忧的角色”,按角色名缩小范围并筛选已批准素材,然后进入审阅。