惊喜吗,意外吗?三天的假期睁眼闭眼它就这么没了。。。
不管差友们这个年跨得是孤独是寂寞还是冷,该说的还是要说,大噶 9102 新年快乐
跨年夜,小辣椒的朋友圈算是真的被各种晒跨年照片、跨年倒计时视频的刷爆了,只是千篇一律的 jpg,效果普通的 mp4 好像少了那么一丢丢创意。。。
这大过年的,来都来了,各位不考虑整点儿不一样的? 
当然了,小辣椒从来不会空着手见人,今天想跟大家聊聊华盛顿大学最近在研发的图像处理技术 —— Photo Wake-Up ,分分钟教你做朋友圈最靓的那个仔!
 Photo Wake-Up 
Photo Wake-Up,顾名思义当然是个可以让照片 “ 活过来 ” 的技术咯,准备好一张普通照片,下面给差友们表演个,大变活人
通过 AI 智能算法,2D 到 3D 的转换,动效模拟一顿操作猛如虎,照片里的宇航员瞬间从 jpg 变成了 gif。
问题来了,怎么办到的?
其实,整个 Photo Wake-Up 技术,最关键的技术总结一下,就是捏人。。。
首先通过 AI 在照片中选中需要进行动效渲染的目标,同时,根据目标创建出可变性的人形模型。
再根据实际的人体体积,估算模拟出皮肤的面积,把人物根据真实的质感重塑出来。
也就是根据照片里的目标对象,重新捏个可以动起来的 3D 人物。
最后把捏出来的人物放到原图里,整套操作就差不多大功告成了。
当然了,过程中出了捏 3D 人物,还有很多细小的步骤,比如智能补全原图,设定 3D 人物的动作轨迹等等。。
不过目前 Photo Wake-Up 还无法实现复杂的动作渲染,但简单的走、跑、跳已经基本没有太大问题。
走。。。
跑。。。
跳!
甚至是,加上搬凳子动作的坐!通过 Photo Wake-Up 都可以流畅的实现。
不过除了裸眼看到的照片人物走出平面的效果,配上 AR 才是 Photo Wake-Up 最正确的食用方式。
拇指、食指捏合发起指令,人物就可以从图片中跑出来了。。。再次捏合即可暂停。
因为处理之后的图像是 3D 的,戴上 AR 后可以看到新建目标 360° 更完整的状态。
哪怕是凑到跟前近距离观察,似乎也看不出什么 bug。

虽然 Photo Wake-Up 还没有成熟到可以广泛应用,但这么细致的 3D 建模,如此创意的交互模式,emmmmm。。。
能不能做成刷爆朋友圈的软件产品小辣椒倒是不清楚,但它很有可能成为继 deepfake 之后,又一个令广大男性同胞浮想联翩的智能技术了吧。。。
图片、资料来源:
1. Photo Wake-Up: 3D Character Animation from a Single Photo:https://grail.cs.washington.edu/projects/wakeup/
2. YouTube 视频:3D Character Animation from a Single Photo
“ 和小姐姐互动的船新方式 ”
继续阅读
阅读原文