通义万相上线实时功能,摄像头画面可即时转风格
万相发布 Real-time 实时功能套件,首个能力 Camera-to-Image 可把手机摄像头实时画面即时转成风格化图像,首发主打二次元。
阿里万相团队 8 月 4 日宣布推出全新的 Real-time 实时功能套件,首发能力名为 Camera-to-Image:打开设备摄像头,眼前的真实画面即时被改写成风格化图像,官方演示展示的是实时转成二次元画风的效果。团队称功能已可直接体验,并给出了产品入口,而非排队等候名单。
和以往有什么不同
万相(阿里通义万相生成式视觉产品线的对外名称)此前的交付形态一直是典型的异步流程:提交提示词或参考图,等任务跑完,再取走文件。Camera-to-Image 把这套循环整个翻了过来——用户不再是「构思一个镜头然后等渲染」,而是举起摄像头,让模型变成一层跑在连续输入流上的滤镜。这个形态更接近 Krea、Decart 等团队和少数研究组在做的「交互级延迟生成」,而不是万相更为人熟知的文生视频赛道。
阿里将 Camera-to-Image 描述为 Real-time 套件的第一项能力,意味着同一名目下还会有后续功能。目前官方尚未公布延迟指标、分辨率上限、定价,以及该功能背后调用的是哪一版万相模型,已知信息均来自团队自身的发布内容。
为什么重要
实时生成是一条分界线:跨过去,生成式视觉就从「生产工具」变成了「交互界面」。能跑在摄像头帧率上的模型,才能接进直播、流媒体、相机应用、虚拟试穿,最终接进眼镜——这些都是批量生成到不了的场景,而它们的分发权掌握在平台方手里,不在创作工具创业公司手里。阿里恰好是少数同时握有有竞争力的视频模型家族和数亿级消费端入口的公司。
真正的看点在成本。交互式生成意味着按帧付推理费而不是按片付,这会逼出激进的蒸馏和极少的采样步数。如果万相能在这样的算力预算下、在消费级硬件或廉价推理上守住可接受的画质,同一套技术就能反哺其批量视频产品,也会给 AIGC 领域的同行画出一条新的下限。