上海大学副教授“变身”萝莉,自制软件合成二次元动漫形象上网课

上海大学副教授“变身”萝莉,自制软件合成二次元动漫形象上网课

老师上网课变身小萝莉

疫情带火了线上教育,也把一批老师逼成了“主播”。

最近,上海大学开启在线教学,为了提高学生上课的积极性,根据澎湃新闻报道,上海大学数码艺术系副主任、副教授蒋飞把他的《动态构成》这门在线教学直播课玩出了花。

作为一名给艺术系学生讲授计算机编程的老师,他担心课程太枯燥学生不愿意看,于是利用虚拟现实和增强现实技术,把自己的课堂搬进了二次元,“变装”上课,从动作到嘴形都可以实时同步动漫人物。

利用技术手段,不仅可以在二次元里感受更加有代入感的“课堂”环境,还可以让同学自行选择各种讲课的动画人物,从萌妹子到机械人,应有尽有。

上海大学副教授“变身”萝莉,自制软件合成二次元动漫形象上网课

图片来自澎湃新闻

如果学生们选择了二次元萌妹子,上课的画风瞬间就会变成这样,上课的学生对此惊讶连连赞不绝口,网课的听课率也显著提高。

上海大学副教授“变身”萝莉,自制软件合成二次元动漫形象上网课

图片来自澎湃新闻

创新网络课堂,提高学生上课的积极性

其实,在做增强现实的网课之前,蒋飞发现老师辛辛苦苦录制了网课,但是课程上线后,并不是所有的学生都看了。

于是,为了让同学们更轻松也更容易地进行学习,也为了更好地给艺术系的同学们讲解计算机编程的相关知识,他利用了双目摄像头,再结合了自己开发的软件,完成了在线“变装”,在这个系统完成后,蒋飞表示,“学生上课的积极性,还有作业质量的提高有明显的进步”。

甚至,蒋飞发现,有不少学生会提前完成录播课的学习,提前上交作业,到了课堂讨论环节,学生会提出超纲问题。因此他现在也需要根据同学们的学习情况实时调整授课进度。

“这也是因课制宜,我的课程讲计算机方面的艺术,很多设计用到编程,非常适合网上教学。”蒋飞说,录播课可以反复回看,直播课用来答疑互动,虚拟替身就是在这时出现。

双目摄像头捕捉人体,自制软件合成动画

生成这样的虚拟替身一共需要两个步骤,一是通过视频捕捉老师的肢体动作;二是通过软件将实时监测出的人体数据通过软件与虚拟形象进行匹配,生成动画。

蒋飞老师采取的是利用双目摄像头来捕捉肢体动作

第一步:双目摄像头可以在同一场景下拍摄左右两幅图像,运用立体匹配算法获取视差图,进而获取深度图,而后通过景深图对二维图像进行三维重建。

第二步便是将检测到的人体数据与动画人物相匹配,这个需要相应的软件,Adobe公司出品的CharacterAnimator就可以将人体的动作实时投射到动画人物,但是却不能实时运行,只能用于后期。

蒋飞老师是通过自己制作的软件完成的这一步,并且进行了优化,这个软件要将接收到的双目摄像头的视频数据转化为人体姿态数据,再对虚拟人物进行实时渲染,还要合成到课堂环境中。

这样的网课,你愿意听吗?

欢迎留言!

上海大学副教授“变身”萝莉,自制软件合成二次元动漫形象上网课

编辑:邓华健

来源:肩膀隐形

声明:本站部分文章及图片转载于互联网,内容版权归原作者所有,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!

上一篇 2020年2月14日
下一篇 2020年2月14日

相关推荐