还记得前一阵子在网路上爆红的AI绘图吗?透过人工智能的画面构筑技术,使用者可以在短时间内就得到精緻度高的图片,开始还会有人诟病AI会有BUG,像是人的手指跟牙齿处理不好,但现在这些问题也进一步获得改善,可能还有人会说...AI绘图不会动啊,但大家有注意到现在已经有人释出AI合成的动图了吗?今天跟大家分享的主题「真人跳舞转换为动画 」,就带大家看看近期最新技术的展现
这两天有网友在讨论区贴上一段影片,基本上就是一位真人女孩跳着热情洋溢的boogie up,但这其实不是该影片的重点,而是有一位二次元人物也在做着相同的动作
这个技术其实就是透过「Stable diffusion」加上「multiControlNet」两项技术,把真人跳舞的影片转换成能动作同步的动画,虽然...虽然还是能看见一些小瑕疵,像是手指的处理依旧会跑掉,但是整体的流畅度以及稳定度几乎99.999没问题,这个就厉害了(拇指),试想这个技术如果可以做延伸,像是结合现在流行的AI绘图等等,不就可以把AI绘图不会动的硬伤给解决了吗?
I transform real person dancing to animation using stable diffusion and multiControlNet
by u/neilwong2012 in StableDiffusion