疫情让在线教育活起来，也让一批教师被迫成为“主播”。 为了让在家学习的同学们有更好的学习体验，老师们辛苦了，各种在线直播软件纷纷上阵。不过，还没等同学们开始抱怨，老师先是向天诉苦，表示“当主播真不容易”。 近日，上海大学开展线上教学。为提高学生上课积极性，据澎湃新闻报道，上海大学数字艺术系副主任、副教授姜飞直播了他的线上教学课《动态构成》。. 作为一名教授艺术类学生计算机编程的老师，他担心课程太枯燥，学生不想看，所以他利用虚拟现实和增强现实技术，将他的课堂搬进了二次元，而“伪装”类，动漫角色从动作到嘴型的实时同步。 运用技术手段，不仅可以体验到更加身临其境的二次元“课堂”环境，还可以让学生选择各种动画角色进行授课，小到萌妹子，大到机器人。图片来自澎湃新闻 如果同学们选了二次元萌妹子，班里的画风瞬间就变成了这个样子👇，班里的同学们都惊讶不已，赞不绝口，还有网课出勤率也有显着提高。图片来自澎湃新闻 近日，蒋飞老师也在澎湃新闻的采访视频中解释了自己为什么会产生这样的想法，以及他是如何在课堂上“伪装”这个萌妹子的。跟着文摘一起来看看吧~ 其实蒋飞在做增强现实网课之前也遇到了上述问题，就是老师努力录制网课，但是课程上线后，不是所有的学生都看了。 于是，为了方便同学们学习，也为了更好的向美术系的同学们讲解计算机编程的知识，他使用了双目摄像头，结合自己开发的软件，完成了线上“变装”。这套系统建成后，姜飞说，“学生的上课积极性、作业质量的提高都有明显的提高。” 甚至，蒋飞还发现，很多同学会提前完成录课学习，提前交作业，而且到了课堂讨论的时候，同学们会提出提纲之外的问题。因此，他现在需要根据学生的学习情况实时调整教学进度。 “这也是根据班级情况量身定做的。我的课程是关于计算机艺术的，很多设计都是用到编程，非常适合在线教学。》蒋飞说，录播课可以反复看，直播课用来答疑互动，虚拟分身这时候出现。图片来自澎湃新闻 开头，只有本科生毕业设计课会用到“改造”设备，但研究生知道这个情况后，也纷纷“报名”请老师这样教。现在，蒋飞优化了软件，可以实现虚拟分身的流畅运行。 “线下上课还是以老师为中心，线上教学以学生为中心，我的风格都是学生自己选的。”谈到线上教学，蒋飞认为这也是对老师的挑战，而老师的压力就更大了。》我感觉线上教学一小时相当于线下教学两小时，倍增。 双目摄像头捕捉人体，自制软件合成动画 生成这样的虚拟分身需要两步，一个就是通过视频捕捉老师的肢体动作；通过软件将人体数据与虚拟形象匹配生成动画。 传统的人体动作捕捉一般在影视制作中使用。很多小球，这些小球是一种传感器，可以将位置状态实时传输到电脑，供后期合成。 这种方法比较准确，但是太复杂了，姜飞老师用双目摄像头来捕捉肢体动作。 双目摄像头可以在同一场景下拍摄左右两张图像，利用立体匹配算法得到视差图，进而得到深度图，然后进行三维重建通过深度图生成二维图像。 当然，蒋飞老师的目的是让身体动作同步到动画角色，所以不需要完整的3D建模，只是通过视频定位他的身体部位，即构建基于双目视觉的人体运动捕捉系统，一种可行的方法是基于颜色特征的Camshift算法对人体关节进行跟踪，结合卡尔曼滤波提高抗干扰性。 当然有各种深度学习模型可以提供基于视频的人体姿态估计，需要双目视觉，普通相机也可以，主要是通过大量标注的视频数据进行模型训练，所以该模型可以仅用二维图像捕捉人体关键关节（肘部、手腕、膝盖等）。 从DeepNet到HRNet，DigestBacteria也整理出了基于深度学习的“人体姿势估计”。有兴趣的同学可以复习一下。 第二步是将检测到的人体数据与动画人物进行匹配。这就需要相应的软件。Adobe出品的CharacterAnimator可以将人体的动作实时投射到动画人物身上，但不能实时运行。以后可以用。 先生蒋飞用自己的软件完成了这一步，并进行了优化。本软件需要将双目摄像头接收到的视频数据转换为人体姿态数据，然后实时渲染虚拟人物。要综合到课堂环境中，难度不小。近几年，我国在线教育蓬勃发展 这次假扮“洛丽塔”的老师蒋飞是上海大学美术学院数字艺术系副主任，上海大学美术学院客座教授麻省理工学院媒体实验室，华裔工业设计师。协会信息与交互设计专业委员会委员。研究方向为数字媒体艺术与信息与交互设计。他一直致力于打造集技术与艺术于一体的复合型人才。他认为学生应具有良好的艺术修养和独特的个人创造力。 江飞曾公开表示，跨学科合作应该是高校数字艺术发展的一个方向，因为数字媒体人才是复合型人才。修养和独特的个人创造力，技术教育应与文化艺术相结合。创新的数字艺术人才要求数字制作相关人员不仅要具有人文艺术修养，还要能够运用最新的数字制作技术。 疫情期间，蒋飞用“转型”的方式给学生们上了网课。他谈到了技术与媒体的完美结合，也对他的教学理念做了最直接的实践。 事实上，近几年以科技内容为辅助的在线教育也蓬勃发展。例如，北京邮电大学去年开设了虚拟教室，采用5G+4K全息投影远程直播授课。 去年9月16日，北京邮电大学全息投影远程直播课堂首次正式开课。卢鹏飞老师在沙河校区主讲的诺贝尔物理学奖简史以全息投影的形式与西土城校区的同学们见面。 北优全息投影远程直播教学主要有两大特点。一是借助5G低时延、高速率的特性实现4K??画面的实时传输，二是全息投影带来的全新体验。卢鹏飞老师在沙河校区授课。西土城校区呈现的实时全息影像。在线同学们看到了基于5G技术的课堂 。4K全息影像传输非常流畅，上课时几乎没有卡顿现象，相当惊人。但是，全息投影技术还不完善，还有很大的发展空间。 去年12月20日，北邮说可以在线学数学了！ 女士。李贺站在蓝色的幕布前，把拉格朗日中值定理讲得有声有色，但他面前并没有学生。没错，所有人都在屏幕前！李老师和同学们在听课时看到的班级 ，不仅可以在宿舍看直播学习，还可以看直播结束后的回放。北邮的学生对虚拟课堂赞不绝口，同时也充满期待：“全息视频教学很新颖，比传统视频远程教学更真实。” “感谢李老师生动精彩的点评，很多想法对我帮助很大，希望以后能看到更多新的，技术与教学的融合，不断给我们带来更好的课程体验！” 通过疫情期间采取的在线学习，我们可以感受到老师们的辛苦和付出，同时也让我们看到了未来的网络。课程的无限潜力。科技和教育一直是两个相辅相成的方向，可以相互推动对方往更好的方向发展。 如果未来的网络课程能够生动、智能、有趣，让学生体验到学习的乐趣，那么这样的网络课程谁会不喜欢呢？
