疫情带火了线上教育，也把一批教员逼成了“主播”。
为了给在家上课的同窗们的同窗们更好的学习体验，教员们煞费苦心，各种线上直播软件齐上阵。不过，先生还没末尾抱怨，教员倒是先把苦叫上了天，纷繁表示“当主播这么不容易”。
最近，上海大学开启在线教学，为了提高先生上课的积极性，依据澎湃旧事报道，上海大学数码艺术系副主任、副教授蒋飞把他的《静态构成》这门在线教学直播课玩出了花。
作为一名给艺术系先生讲授计算机编程的教员，他担忧课程太单调先生不情愿看，于是应用虚拟理想和增强理想技术，把本人的课堂搬进了二次元，“变装”上课，从举措到嘴形都可以实时同步动漫人物。
应用技术手腕，不只可以在二次元里感受愈加有代入感的“课堂”环境，还可以让同窗自行选择各种讲课的动画人物，从萌妹子到机械人，应有尽有。
图片来自澎湃旧事
假设先生们选择了二次元萌妹子，上课的画风瞬间就会变成这样👇，上课的先生对此诧异连连赞不绝口，网课的听课率也清楚提高。
图片来自澎湃旧事
近日，蒋飞教员也在澎湃旧事的采访视频中阐明了本人为何萌生了这样的想法，又是如何“变装”萌妹子上课的，快和文摘菌一同来看看吧~
其实，在做增强理想的网课之前，蒋飞也遇到了上述难题，就是教员辛辛劳苦录制了网课，但是课程上线后，并不是一切的先生都看了。
于是，为了让同窗们更轻松也更容易地停止学习，也为了更好地给艺术系的同窗们解说计算机编程的相关知识，他应用了双目摄像头，再结合了本人开发的软件，完成了在线“变装”，在这个系统完成后，蒋飞表示，“先生上课的积极性，还有作业质量的提高有清楚的提高”。
甚至，蒋飞发现，有不少先生会提早完成录播课的学习，提早上交作业，到了课堂讨论环节，先生会提出超纲成绩。因此他如今也需求依据同窗们的学习状况实时调整授课进度。
“这也是因课制宜，我的课程讲计算机方面的艺术，很多设计用到编程，十分适宜网上教学。”蒋飞说，录播课可以重复回看，直播课用来答疑互动，虚拟替身就是在这时出现。
图片来自澎湃旧事
一末尾，只要本科毕业设计课上会用到“变装”设备，但是研讨生知道这个状况后，也纷繁“上书”要求教员这样上课。如今，蒋飞曾经优化了软件，可以完成虚拟替身的流利运转了。
“线下上课仍以教员为中心，线上教学以先生为中心，我的外型都是先生帮选的。”谈到线上教学，蒋飞以为，这也是对教员的一种应战，教员的压力更大了，“我觉得上了一个小时的线上，相当于两个小时的线下，真的是成倍的添加”。
双目摄像头捕捉人体，自制软件分解动画
生成这样的虚拟替身一共需求两个步骤，一是经过视频捕捉教员的肢体举措；二是经过软件将实时监测出的人体数据经过软件与虚拟笼统停止婚配，生成动画。
传统的人体举措捕捉普通用于影视制造，在一些科幻片的拍摄花絮上，我们常常可以看到绿幕前的演员身上绑了许多小球，这些小球就是一种传感器，可以将位置形状实时传输到计算机中用于前期分解。
这种方式虽然比较准确，但是过于复杂，蒋飞教员采取的是应用双目摄像头来捕捉肢体举措。
双目摄像头可以在同一场景下拍摄左右两幅图像，运用平面婚配算法获取视差图，进而获取深度图，然后经过景深图对二维图像停止三维重建。
当然，蒋飞教员的目的是将身体举措同步到动画人物上，因此也不需求停止残缺的三维建模，而只需求经过视频定位本人的身体部位，即基于双目视觉构建人体举措捕捉系统，一种可行的办法是基于颜色特征的 Camshift 算法对人体关节停止追踪，结合 Kalman 滤波提高抗搅扰性。
当然，如今也有各种深度学习模型可以提供基于视频的人体姿态估量，并且不需求双目视觉，普通摄像头也可以完成，主要是经过少量已标记的视频数据停止模型训练，从而让模型可以仅凭二维图像就可以捕捉人的关键关节（肘部、手段、膝盖等）。
从 DeepNet 到 HRNet，文摘菌也曾经对基于深度学习的“人体姿态估量”停止了梳理，感兴味的同窗可以回忆一下。
第二步便是将检测到的人体数据与动画人物相婚配，这个需求相应的软件，Adobe 公司出品的 CharacterAnimator 就可以将人体的举措实时投射到动画人物，但是却不能实时运转，只能用于前期。
蒋飞教员是经过本人制造的软件完成的这一步，并且停止了优化，这个软件要将接纳到的双目摄像头的视频数据转化为人体姿态数据，再对虚拟人物停止实时渲染，还要分解到课堂环境中，这个难度还是不小的。
近年来，我国线上教育风生水起
