人工智能(AI)引入多媒体处理领域,催生了大量新功能、新能力和新应用。Soundbar(回音壁音响)、机顶盒(STB)、电视和数字标牌如今已经发展为支持摄像头和麦克风接口的互动型、高功能设备,能够充分利用AI赋能的各种特性。
在家庭环境中,这些AI能力包括支持 Dolby Atmos 5.1 和 Dolby Vision、音量均衡、对话增强、视频增强(up-scaling)、人脸识别、语音识别、用户追踪以及人体姿态估计等功能。在公共场所,AI也推动了智能标牌的发展,实现了人数统计、性别与年龄识别等特性。
AI在边缘侧(Edge)的持续发展,使得智能决策可以在本地完成,而不依赖云端。这不仅提升了内容安全性和用户数据隐私性,还能降低延迟、优化带宽使用效率。
然而,这些进步也为系统开发者带来了新的挑战与复杂性。
Synaptics 专注于打造新一代AI增强型解决方案,帮助开发者应对这些复杂性,并整合关键要素。这些要素包括:高性能、低功耗、安全的硬件架构;复杂且应用场景特定的AI算法;以及基于开源的、针对具体用例训练的AI模型,从而提升整体用户体验。
我们的 VS680 多媒体处理器具备所需的吞吐量、能效和可扩展性,可满足各种智能内容分发系统和应用的需求。其可扩展性来自于平台中高性能CPU、GPU和专用NPU(神经网络处理单元)以及支持的外设组合。该高集成度SoC采取“安全优先”设计,使得NPU与AI音视频处理链在受信环境中运行,确保用户隐私和满足DRM(数字版权管理)要求。
不断壮大的开发者、软件和系统提供商生态正在为该平台优化AI模型,使用我们基于Android的开源SyNAPTM工具包,打造易于使用、极具安全性的AI模型优化路径。包括 Pilot.AI、Visidon、Askey 和 IDR&D 等合作伙伴,已经基于该平台开展定制部署。
该工具包的特色功能包括执行可执行二进制图(Executable Binary Graph,EBG)——一种由 Synaptics 设计的高性能模型格式,同时支持对EBG进行签名和加密(SyKURE),以实现可信、安全的AI推理过程。
搭载AI内容处理能力的 Synaptics VS680 SoC、SyNAP 和 SyKURE 将在 IBC 展会上展出。如需预约演示,欢迎发送邮件至 press@synaptics.com,参观我们的IBC展位(Balcony Booth BS17)。