3D版pix2pix来了,画一只猫就能抱起来吸丨github

知乎 2018/09/1820:04 显示图片

原标题:3D版pix2pix来了,画一只猫就能抱起来吸丨github

郭一璞 发自 凹非寺
量子位 报道 | 公众号 QbitAI

上帝画了一只猫,程序员把它变成了真猫,还抱起来吸了一口。

是的,现在pix2pix图像转换可以在3D模型上实现了。

pix2pix生成3D猫 https://www.zhihu.com/video/1025437162237358080

推特博主高桥启治郎(Keijiro Takahashi)最近上传了一个3D猫猫,用pix2pix来给3D模型加上一层“猫皮”,而3D模型则用的是(打游戏用的)Unity。

△ 这个logo是不是经常在游戏启动页面上见到?
所以,这样的3D猫是怎么做出来的呢?
学会画画,你一定会有猫的

上帝说,要有猫。

于是,高桥拿出了Sketch Pad。

Sketch Pad是一个吸猫神器,想吸什么样的猫就有什么样的猫,想让猫摆成什么姿势就可以让猫摆成什么姿势。

前提是,你画得出来。

比如这样:

或者这样:

系统和模型准备

除了Sketch Pad,你还需要装好Unity 2018.1以及计算着色器功能,包含DX11、 Metal和Vulkan。

另外,因为作者没有准备模型,所以最好先下载一个训练好的edges2cats模型,最好先学会pix2pix-tensorflow训练模型。

猫是如何成精的?

罗马不是一天建成的,猫猫不是一天成精的。

高桥从本月初开始就一直在研究如何用Unity结合pix2pix来生成3D猫。

但猫的生成并非一帆风顺的,刚开始,是这样的混沌状态。

突然就有了出息,知道如何“做猫”。

外形有了,但精神状态似乎不太好,所以就让它学会了运动。

最后,才能修炼成真猫。

One More Thing

其实作者高桥启治郎一直沉迷用Unity生成各种奇怪的玩意,从场景、雕塑到卡通角色。

为什么他对Unity爱的这么深沉?

因为……Unity给他发工资。

高桥是一位游戏开发工程师,之前在索尼工作了十年,后来跳到了Unity,就专注创造各种3D作品。比如下面这个萌妹子Unity酱就是他参与创作的。

觉得妹子萌的话可以戳github围观开源代码:

https://github.com/keijiro/unitychan-crs

内附妹子唱歌跳舞的油管视频,有好心的up主搬运到了B站:

https://www.bilibili.com/video/av7622460/

传送门

github:

https://github.com/keijiro/Pix2Pix

高桥启治郎推特:

https://twitter.com/_kzr/status/1041611079082663937

就酱,吸猫愉快~

欢迎大家关注我们的专栏:量子位 - 知乎专栏

诚挚招聘

量子位正在招募编辑/记者,工作地点在北京中关村。期待有才气、有热情的同学加入我们!相关细节,请在量子位公众号(QbitAI)对话界面,回复“招聘”两个字。

量子位 QbitAI· 头条号签约作者

վ'ᴗ' ի 追踪AI技术和产品新动态