亿迅智能制造网
工业4.0先进制造技术信息网站!
首页 | 制造技术 | 制造设备 | 工业物联网 | 工业材料 | 设备保养维修 | 工业编程 |
home  MfgRobots >> 亿迅智能制造网 >  >> Manufacturing Technology >> 工业技术

“Photo Wake-Up” AI让静态照片变身可交互3D动画

从单张图片生成全3D动画:CNN+SMPL模型新突破

华盛顿大学与Facebook团队开发“Photo Wake-Up”,用卷积神经网络(CNN)从单张静态图片生成3D角色动画:可让画中人走出、坐下、奔跑、跳跃,支持显示器、VR/AR设备交互式观看。区别于视频/连拍动画,仅需单图输入即提供完整3D体验。

五步流程

  1. 用可变体模型拟合图像
  2. 估计身体标签图
  3. 在可变体模型引导下逐步构建网格
  4. 绑定网格并估计蒙皮权重
  5. 重建纹理并置于空白背景

CNN依赖预训练SMPL模型,运行于NVIDIA TITAN GPU。适用海报、艺术画、运动照片等正面图像;用户可编辑照片中人物、3D查看重建体、在AR中漫游动画(如将画作贴墙上绕行观看)。已测试卡通、涂鸦、库里照片、毕加索画作等70余张网图。

对比与局限

人工评估显示Photo Wake-Up静态帧畸变更小、更真实,且提供传统技术无法实现的真3D体验。但仍存不足:未建模反射/阴影、偶因姿态错误致体形不真、遮挡处理(如盘腿坐)需优化。

参考文献:arXiv:1812.02246 | University of Washington

工业技术

  1. Wittmann Battenfeld在巴西Vinhedo启用9000平方英尺新设施拓展运营
  2. OMP新白皮书:数据驱动决策赋能现代制造业
  3. AI工具检测新闻源准确性与政治偏见
  4. 通用光调制器:精准控制物质的突破性激光架构
  5. 基于激光的系统实现材料辐射损伤实时监测
  6. 革命性智能手机算法实现精准疾病诊断
  7. 柔性整流天线将WiFi信号转电能:为微型设备供电新突破
  8. AI预测行人动作护航自动驾驶:基于生物力学的循环神经网络
  9. AI驱动负载监测系统故障预警:非侵入式实时诊断机电设备
  10. 谷歌推出AI:从首尾帧生成完整视频
  11. 先进电子皮肤实现类人触觉感知
  12. 革命性DNA存储让日常物品变身耐久数据档案