联发科近期正式宣布,与腾讯会议联合优化的端侧NPU虚拟背景功能,已在搭载MediaTek天玑旗舰芯的终端正式上线。
该功能以人像分割技术为依托,能够在视频会议时自动识别参会人,并将周围环境替换为指定图像或视频。
基于自建多样性数据集,AI人像分割技术不但能够在各应用场景中实现稳定精准的人像分割,且模型设计兼具轻量化与高计算性价比,用户使用各种类型的终端,都能获得流畅且准确的人像分割效果。
用户不论处于任何环境内,都能够进行流畅真是的虚拟背景切换,非常方便。
为了充分发挥出天玑芯片的AI算力,双方针对端侧AI人像分割模型,在GPU和NPU架构上进行协同优化,显著提升了处理速度和能效比。
尤其天玑9400的AI性能大增,在新一代NPU890的加持下,在苏黎世ETH AI Benchmark 测试中成绩超过6700分,AI功耗相比天玑9300降低35%,性能、能效直接拉满了。
得益于性能强劲的NPU 890,天玑9400系列能够利用强大的AI算力,高效处理语音、图像和视频等AI任务。使得在天玑9400 NPU 上运行的虚拟背景功能版本,较于CPU FP模式,性能提升了3.5-4倍,并将执行耗时缩短了6ms,并降低运行功耗,进一步延长了续航时间,整体的体验更出色。
此外,天玑9400配备MediaTek天玑AI智能体化引擎,支持端侧AI应用,结合时域张量硬件加速、端侧高画质视频生成等先进技术,使得Stable Diffusion端侧运行的性能提升2倍,让用户轻松享受高分辨率生图、端侧动图和视频生成等功能,体验到更多的趣味新玩法。
这也是真正将AI性能实际落地,让用户真切感受到AI能力的标志性场景之一,让用户能够随时随地的沉浸式开会,再也不用着急忙慌的找背景板。
腾讯会议智能应用研发中心负责人左小祥表示:本次与MediaTek的合作,在天玑移动平台强大的AI算力支持下,腾讯会议将AI人像分割模型迁移至MediaTek天玑AI处理器NPU上运行,使得AI算法运行更快的同时,还大幅降低了算法的CPU占用,节省更多CPU资源。
目前,腾讯会议已经在搭载天玑9000、天玑9200、天玑9300、天玑9400的多个终端上线【虚拟背景】的端侧NPU版本。欢迎各位天玑用户下载腾讯会议APP,体验高效AI性能加持的开会模式。
另外,今年vivo X200系列、OPPO Find X8系列都第一时间搭载天玑9400发布,在各个层面全方位的落地了AI功能,比如Find X8系列上就打造了非常易用、实用的“一键问屏”功能。
在小红书中看到的旅游攻略可以直接通过唤出小布助手,发送“制定旅游攻略”,小布助手将通过识别屏幕的内容,分配智能指令,按照用户的需求,一键生成旅游路线等。
此外,AI超清像素、AI消除、AI去拖影、AI去除反光、AI文档助手等各种功能也非常丰富。
期待未来联发科和厂商能够进一步合作,早日让《钢铁侠》里的贾维斯一样的私人助理成真。