老师提出问题，孩子们一起喊出答案。
这是学校教室里的一幕。
1月27日起，这一场景也将在网络课堂上呈现。
即日起，在作业帮直播间上课的学生将可以听到同组同学的发言。
而且老师还可以听到孩子们的“现场演讲”。
模拟线下课堂的互动氛围。
作业帮小学出品的负责人·曹越表示，希望给孩子们线下上课的体验：有朋友一起学习，有老师关注你。
模拟这样的气氛并不是一件容易的事。
大家为集体发言功能“互相倾听”的升级版付出了几个月的努力。
程序员还加班加点地进行技术研究。
而这只是作业帮利用AI技术让课堂变得更有趣的最新功能。
技术服务于教育需求。
仅在小学课堂，2018年推出集体直播间后，就如何提升集体体验、如何更加贴近真实课堂等方面，开发推出了不同的AI功能。
对于小学生和他们很多领域的父母来说，人工智能可能还是一个比较遥远的名词，但孩子们在课堂上喜欢的“心比心”和“弹幕”，以及现在可以听到朋友的声音，靠的是AI功能。
“有趣且有方法论。
”曹越说，这是小学的产品概念。
让网课变得有趣，培养孩子的学习习惯和方法。
小学产品经理聂景琪表示，对于孩子们，尤其是小学低年级的孩子来说，上有趣的课很重要。
“只有当他觉得有趣的时候，他才能理解。
”老师，我仍然举起双手。
“我们想知道大班模式能否尽可能给用户更好的体验。
” 1月25日，作业帮小学出品的负责人曹越表示，随着大班化发展较早的直播课，一位老师可能面临太多学生。
学生们可能会觉得老师不关注他们，因此没有好好听课，尤其是孩子们。
为了增强学生更多的个人体验，在真实的课堂上学习小组教学，曹越创建了大班集体直播间模式。
今年1月，作业帮小学课程直播模式升级。
登录后，孩子们会发现他们有一个群组。
每组 6 名学生组成一个班级。
除了群直播室之外，还有双向视频。
以前只有小孩子才能在直播中看到老师。
此次升级后，老师也能见到孩子了。
从老师端，你可以随时翻转屏幕，查看不同孩子的状态。
跟踪观察新功能、新产品的使用情况，是产品经理的日常。
曹越说，如果你观察课堂，你会发现老师与孩子们的互动很多。
尤其是双向视频开启后，老师可能会提醒孩子们别动，或者告诉孩子们大家都很棒，给自己点个赞。
曹越等人很快就注意到了一个问题。
“孩子喜欢之后，老师没有说‘把手放下’，孩子可能连手都没有放下。
”曹越表示，孩子做出动作后，他很难知道老师是否看到了。
也就是说，缺乏反馈。
但一个老师可能同时面对数千名学生。
在这种情况下，人工智能能帮助老师吗？群直播间上线后，增强了小群、小班的感觉。
如何增强互动性，如何更好地激发学习兴趣？ “我们想在直播间做一些更好玩、更有趣的事情。
”聂景琪说道。
如果你感到快乐，就比较一下自己。
“我们希望那些常见的手势能够被（机器）识别，并且系统能够给出一些反馈。
”曹越介绍，手势识别功能的初衷是为了给孩子及时反馈，提升课堂效果。
互动性。
“我们当时也有这样的AI能力。
”聂景琪说。
群直播间上线后，大家也希望能够利用好AI，做一些有趣的事情。
几个月后，大概今年四五月份，产品和技术部门讨论决定做手势识别。
首先，找出孩子们最常用的一系列手势，比如心连心、点赞、好等等。
问题就来了：孩子们来自全国各地，他们的手势方式可能会有很大不同。
比如心有比较，有的这样，有的那样；有的用一只手，有的用双手。
“最早定义手势是很难的。
如何定义一些更通用、更简洁的手势。
比如每个人对心的比较不同，但技术无法容纳（全部）。
”负责人，作业邦智能技术实验室王艳介绍。
从技术上来说，最终的目标是保证大家的理解是一致的。
手势识别，简单来说，就是让机器“看到”屏幕前孩子的一个动作。
它需要识别并回应它。
为了让机器识别手势，它必须首先被告知某个手势的含义。
首先，收集手势。
演讲者老师推出了儿童手势合集，并收集了数千张儿童做手势的照片。
王艳说，当时工程师们还给自己写了一个小程序。
团队里的工程师在课堂上假装成孩子并做出手势。
收集同一手势的不同图片。
去掉罕见的手势，保留常见的手势，制作模型，然后训练机器识别它们。
几个月后，暑假课程期间，手势识别的第一个版本上线了。
这个功能很快俘获了孩子们的心。
在暑期课后问卷调查中，在众多参与的学生中，约有94%的孩子表示非常喜欢。
他们最喜欢和最常用的是 Like、Like 和 Ok。
保持积极向上的态度。
同学你去哪儿了？课程仍从去年暑假开始。
细心的孩子会发现，眼前的屏幕变得非常酷：它不仅能“识别”他们所做的动作，还能“记录”他们是否认真听讲，甚至可以“看到”距离有多远你来自屏幕。
如果你不专心上课，你可能会收到给老师补习的提醒信息，或者你妈妈可能会接到老师的电话。
太有趣了。
“家长负担很重，要陪孩子上课。
但如果是线下，我就交给老师，老师会替我照顾。
”曹越表示，利用AI技术赋能在线课程，可以为特殊教育的老师一家提供很多利器，甚至辅导老师可以帮助父母照顾孩子。
这些工具中最著名的工具之一是儿童注意力测试。
也就是用AI来判断孩子是否专心上课。
“人工智能将帮助我们辅导老师并选择他们：我们需要关注这10个孩子。
他们的注意力已经很低。
”曹越举了一个例子。
这个时候，老师的辅导重点就集中在这10个孩子身上。
孩子。
这个功能其实技术上有一定难度。
“比如，他可能在发呆，但画面和冥想没有太大区别。
”王艳表示，专注有很多维度，如何定义本身就很困难。
“这个东西很主观，什么是专注？”曹越说。
比如你可以说不看屏幕就是不集中注意力，但是这个孩子可能会低头做笔记。
他表示，对于如何定义浓度，他们做了很多“精细维度拆解”。
聂景琪表示，一开始，机器在很多情况下可能无法准确判断。
例如，在孩子们上课的环境中，光线比较暗，机器无法“看到”。
它可能认为您已经离开班级。
退出检测是与浓度集成的功能。
目的是关注孩子的班级状况。
“线下，有老师的参与。
但线上，如果家里没有其他人，孩子们可能不那么不自觉，缺勤测试就相当于对他进行监督的一种手段。
同时，让孩子们感觉更有趣、更自觉。
”作业帮视觉实验室程序员杨森介绍，功能很酷，但准确性并不是更重要，系统多一个错误，就意味着老师多浪费一次时间。
王艳表示，一开始，缺勤检测的准确度不够高，所以我们重点梳理了几个问题严重的异常案例，进行了针对性的分析解读，并进行了改进。
准确率达到90%，除了判断孩子是否注意力集中外，机器还可以判断孩子是否离屏幕太近，如果发现孩子离屏幕太近，系统就会弹出提示。
一个气泡来提醒你。
聂静琪表示，这里有一个平衡问题，提醒不要太频繁，以免打扰课堂。
“例如，如果我看到你的头接触到屏幕，我就会向你发送提醒。
”杨森表示，提醒的使用非常严格。
孩子们，你们在说什么？从明年夏天开始，孩子们还会发现：嘿，他们可以对着屏幕说话吗？它不仅能听懂，还能飘浮它所说的内容。
今年暑假，作业帮在在线教育行业率先推出弹幕功能。
“以前老师问问题的时候，学生需要点击输入法，突然就占据了半个屏幕来打字，这种体验非常糟糕。
”作业帮智能语音技术王强强表示，尤其是针对低年级。
对于一年级或二年级的幼儿来说，他们可能还不会打字，或者打字速度可能很慢。
但老师和学生需要互动。
老师希望得到上课学生的反馈，孩子们需要“就像我们在普通教室里一样”表达自己。
有了语音弹幕功能，如果老师提出问题，学生页面上会直接弹出一个小麦克风，他可以直接对着屏幕说话。
然后AI会识别孩子们的言论并向老师“报告”，比如最常见的四种回应是什么。
鼓励孩子发言并参与课堂。
“营造一个非常有趣的课堂氛围。
”产品经理聂景琪表示，语音弹幕的主要使用场景是小学生语文。
例如，老师读完一个故事并提出开放式问题后，学生可以直接发言。
聂静琪表示，老师也非常喜欢这个功能。
例如，他们可以询问孩子是否理解并很快收到反馈。
从学生的角度来看，他不需要打字，可以快速回答。
王强强介绍，去年夏天之前，他们对弹幕进行了小范围的测试，发现孩子们非常喜欢。
他们觉得很智能，屏幕能听懂自己的话，很愉快。
暑假期间正式上线，高并发的问题就来了。
什么是高并发？家庭作业帮助的直播课程有时有数千、数万甚至更多的孩子一起上课。
当孩子们回答同样的问题时，就会产生瞬间的高并发。
王强强举了个例子，想象一下春晚抢红包的场景。
瞬间就有数万个电话打进来，“我们每天就相当于抢红包”。
换句话说，机器需要巨大的“脑容量”来支撑巨大的瞬时识别能力。
“当时我们压力很大。
”王强强说道。
最终，作业邦副总裁罗亮做出了增设机器的决定。
罗亮表示，这个功能很好，不能因为成本高就不让孩子使用。
“最后买了那么多机器，都得自己承担了。
”王强强说。
除了要处理高并发之外，机器要识别孩子们在说什么也不容易。
“一是他说的可能不清楚。
还有可能他说的与老师的问题无关，甚至与中文或外语无关。
孩子们创造了自己的语言。
”王强强说，有时会夹杂一些家长的声音，还有口音的问题。
学生来自世界各地，很多孩子来自三四五六线城市。
如果普通话不标准，或者有方言问题，如何识别？王强强表示，没有更好的办法，只能不断训练AI的识别能力。
理解孩子，是一个不断优化的过程。
“如果成千上万的孩子会说话，那么一定有十几个、二十个能说得好、说得更标准的人。
”王强强说，然后算法通过半监督的方法自动学习和增强模型。
让我们一起回答问题，你们可以听到彼此的声音。
总分是 9.48 分（满分 10 分）。
以下是孩子们在去年暑假结束后对新人工智能功能的评价。
产品经理张钦回忆，在暑假后的这次调查中，他们发现在群直播间里，孩子们不再满足，只谈论自己。
超过70%的学生表示想听听同组孩子的声音。
让孩子们互相听到彼此的声音在技术上是很难实现的。
主要问题是回声和噪声消除。
“作业帮”流媒体客户端负责人表示，试想一下，数以万计的人在一起进行在线会议。
我们应该开发这个功能吗？产品经理去和技术同事讨论需求。
大家打来打去，打来打去，最后还是决定走。
也让老师能够实时听到孩子们的声音。
在之前孩子们的演讲中，老师看到声音被转换成文字。
产品经理聂景琪表示，大家觉得这样也能营造出良好的课堂氛围。
“我们组的其他同学都在回答（问题），也许我不想说，我听到了别人说的，我也想说。
”但。
这也是一个巨大的挑战。
即使一个人的设备传输噪音，也可能毁掉一堂课。
作业帮的孩子们上课的场景非常复杂，使用的设备更是复杂。
曾建斌说，孩子们可以在菜市场、工地、商场上课。
背景中会有各种噪音。
他们可能使用未经许可或非品牌设备，这些设备很难识别，更不用说适应模型了。
灰度测试。
也就是说，选择一个特定的类并尝试一下效果。
结果，老师表示非常吵闹，引发了一场课堂。
有的孩子说：“对我来说太吵了。
”问题比想象的更严重。
曾建斌等人连忙停止了测试。
处理棘手的事情并加班。
找到所有可能的模型并对其进行调整以减少噪音和安静。
对于个别设备无法识别的情况，尝试寻找解决方案。
曾建斌表示，相对困难的机型占比不到1%，但“这个不能放弃，不能说你的手机不好就不应该上作业邦的课”。
1月27日，作业帮集体讲话升级。
孩子们现在可以听到同学们的声音了。
老师还可以随机选择一组同学并聆听他们的实时演讲。
据小学产品负责人曹越介绍，该功能也是基于真实的课堂场景。
孩子们可以听到老师的声音，老师可以听到孩子们的声音，孩子们也可以听到彼此的声音。
曹越说，学习不是一件单向的事情。
他希望孩子们一起努力，可以互相影响，希望能教出更好的课。
建立一个频道，也许您会看到更多潜在的寒假即将到来。
孩子们可以听到队友的声音，但效果如何呢？??他们喜欢吗？对于张勤等人来说，当新功能推出时，用户体验的跟进就开始了。
前期推出的功能还需要不断优化。
例如，浓度测试。
“我们仍在寻找各种维度来丰富模型。
”曹越说。
对于曾建斌等人来说，集体讲话的升级或许只是新挑战的开始。
新问题随时可能出现，新模式、新噪音。
而每个问题都可能影响一个班级，甚至更多。
作业帮副总裁罗亮表示，在教育公司当程序员是不一样的。
对于其他行业的程序员来说，用户可能是一个数字、一个pv、一个uv。
但对于教育公司的程序员来说，用户就在你的面前，他是一个真正的孩子。
罗亮举了一个例子。
有一次，一位程序员已经下班了。
一位名叫老师的导师找到他，说有一个孩子因为网络问题无法做互动题而哭。
程序员赶紧回到公司看看到底出了什么问题。
。
“我们是在线教育，如果我们的技术服务不好，老师讲得再好，学生体验也会受到影响。
”曾建斌说。
在张勤看来，在线教育优势明显，汇聚优质资源，覆盖更多学生。
但局限性也很明显，比如感知的影响。
例如，由于老师在幕后，他对学生的影响力实际上会减少。
张勤表示，这个缺点需要更多手段来改善，那就是不断减少折扣。
负责人语音实验室（负责人智能语音技术）主任王强强认为，教育应该拓展一些可能性。
而技术可以帮助带来更多可能性。
毕竟，屏幕将不同地区的孩子与老师联系起来。
在王强强看来，人工智能、科技、更好的老师都是辅助手段。
它们都是“技能”。
“道”就是建立一个渠道、一个平台，让孩子看到更多的可能性。
他可能会走得更远。
“其实，我们要做的就是这种事情。
”王强强说道。