8 万样本夺冠:小米 WorldCast 3D 运镜上线 REDMI K100

结论:小米在 2026 年 11 月 4 日公布,自研视觉生成框架 WorldCast 已落地 REDMI K100,用户从相册选一张静态照片就能生成可环绕、推拉、倾斜的 3D 运镜视频。
关键数字:训练样本 8 万条;CLACT 评测 42 个场景;轨迹误差 ATE 0.065。

指标数值对比
训练样本量8 万条UE5 渲染 5 万 + Blender 3 万
CLACT 评测规模42 场景 × 6 类轨迹与 13 个方法同台
轨迹精度 ATE0.065此前最优 0.098
身份相似度提升约 28%较次优方法
画面质量 IQ0.719第一梯队

一张照片怎么变成 3D 运镜

WorldCast 先把二维照片用预训练深度估计模型升到三维空间,反投影成带颜色的 3D 点云,再沿目标相机轨迹渲染引导图。单目深度只有相对值,WorldCast 会枚举候选尺度比对运动量,选出与参考运动最吻合的一个,避免运镜幅度整体失真。

背面长什么样由几何说了算

大角度运镜会揭开初始帧没拍到的侧脸、后背,生成模型容易自由发挥导致身份漂移。WorldCast 引入多视角锚点图,用 GAMA(几何对齐记忆注意力)按目标视角检索最相关角色特征,用几何查询替代模型猜测。

为什么手机厂商在卷可控生成

REDMI K100 的 3D 运镜并非孤立玩法,它与一键动图、希区柯克变焦、延时摄影共同构成 AI 影像矩阵。小米把方法、数据集 CLACT 与评测方式沉淀下来,下一步探索更长的连续生成与可控 4D 视频。

谁适合用、谁不必等

喜欢用手机记录生活、希望把一张旅行照或合影变成电影感环绕视频的用户,REDMI K100 相册内置的 3D 运镜值得一试;对只想快速发原图的人则属锦上添花。

所以呢:这意味着可控视觉生成从论文走向端侧一键出片,但算法蒸馏、端云协同等工程功夫仍是体验落差的关键。

常见问题

哪些手机能用 WorldCast 3D 运镜?

REDMI K100 已上线该功能,从相册选择一张静态照片即可生成。其他机型是否支持,官方暂未公布。

生成的视频人物会”变脸”吗?

在 CLACT 基准上,WorldCast 身份相似度较次优方法提升约 28%,镜头绕到侧脸、背面再回正面时五官与发型保持一致。

一张照片能生成多长、什么比例?

公开资料未公布单段时长与比例上限,实际以 REDMI K100 相册内功能入口为准。

信息来源:小米技术官方公众号及 IT之家、腾讯新闻、快科技等媒体 2026 年 11 月 4 日报道,技术细节源自小米公开论文 WorldCast。


说说

全部说说