直播教学的方法、装置、终端和存储介质
阅读：758发布：2020-05-11
专利汇可以提供直播教学的方法、装置、终端和存储介质专利检索，专利查询，专利分析的服务。并且本 申请 公开了一种直播教学的方法，属于互联网领域。所述方法包括：在第一课程的直播教学界面中，在第一显示层显示所述第一课程对应的三维场景动画；获取教师直播视频，在第二显示层显示所述教师直播视频，其中，所述第二显示层位于所述第一显示层的下层；获取学生直播视频，在第三显示层显示所述学生直播视频，其中，所述第三显示层位于所述第一显示层的上层。采用本申请可以使直播教学场景更加生动，以提高学生的学习效率。，下面是直播教学的方法、装置、终端和存储介质专利的具体信息内容。
1.一种直播教学的方法，其特征在于，所述方法应用于第一终端，所述方法包括：
在第一课程的直播教学界面中，在第一显示层显示所述第一课程对应的三维场景动画；
获取教师直播视频，在第二显示层显示所述教师直播视频，其中，所述第二显示层位于所述第一显示层的下层；
获取学生直播视频，在第三显示层显示所述学生直播视频，其中，所述第三显示层位于所述第一显示层的上层。
2.根据权利要求1所述的方法，其特征在于，所述第一终端为学生终端，所述在第一显示层显示所述第一课程对应的三维场景动画，包括：
在第一显示层显示所述第一课程非全屏对应的三维场景动画；
所述获取教师直播视频，在第二显示层显示所述教师直播视频，包括：
获取第二终端通过直播服务器发送的教师直播视频，在第二显示层全屏显示所述教师直播视频，其中，所述第二终端为教师终端；
所述获取学生直播视频，在第三显示层显示所述学生直播视频，包括：
通过拍摄装置获取学生直播视频，在第三显示层非全屏显示所述学生直播视频。
3.根据权利要求1所述的方法，其特征在于，所述第一终端为教师终端，所述在第一显示层显示所述第一课程对应的三维场景动画，包括：
在第一显示层显示所述第一课程非全屏对应的三维场景动画；
所述获取教师直播视频，在第二显示层显示所述教师直播视频，包括：
通过拍摄装置获取教师直播视频，在第二显示层非全屏显示所述教师直播视频，所述三维场景动画的显示区域小于所述教师直播视频的显示区域；
所述获取学生直播视频，在第三显示层显示所述学生直播视频，包括：
获取第二终端通过直播服务器发送的学生直播视频，在第三显示层非全屏显示所述学生直播视频。
4.根据权利要求1所述的方法，其特征在于，所述方法还包括：
当检测到对所述三维场景动画中目标道具的选择操作时，控制所述目标道具执行所述选择操作对应的预设动作，和/或播放所述选择操作对应的预设音频。
5.根据权利要求4所述的方法，其特征在于，当检测到对所述三维场景动画中目标道具的选择操作时，控制所述目标道具执行所述选择操作对应的预设动作，包括：
当检测到对所述三维场景动画中目标道具的选择操作时，向双端同步服务器发送目标道具控制消息，以使所述双端同步服务器向所述第一终端和第二终端同时转发所述控制消息；
接收所述目标道具控制消息，控制所述目标道具执行所述第一选择操作对应的预设动作。
6.根据权利要求1所述的方法，其特征在于，所述第一终端为学生终端，所述方法还包括：
接收第一音频的领读指令，播放所述第一音频；
接收第一学生跟读音频，向所述第二终端发送所述第一学生跟读音频。
7.根据权利要求1所述的方法，其特征在于，所述第一终端为学生终端，所述方法还包括：
显示第二课程的学生自学界面；
在所述学生自学界面中，全屏显示所述第二课程对应的三维场景动画；
接收第二音频的领读指令，播放所述第二音频；
接收第二学生跟读音频，将所述第二音频和所述第二学生跟读音频输入预先训练的语音识别模型，确定所述第二音频和所述第二学生跟读音频的相似度；
如果所述相似度大于预设阈值，则在所述学生自学界面显示虚拟奖励物品。
8.根据权利要求1所述的方法，其特征在于，所述第一终端为教师终端，所述方法还包括：
当检测到添加目标魔法表情的触发事件时，获取所述目标魔法表情；
对所述教师直播视频中的各帧图像进行人脸识别，确定所述各帧图像中的人脸区域；
在所述各帧图像中的人脸区域添加所述目标魔法表情。
9.根据权利要求6所述的方法，其特征在于，所述当检测到添加目标魔法表情的触发事件时，获取所述目标魔法表情，包括：
当接收到对所述目标魔法表情的选择指令时，获取所述目标魔法表情。
10.一种直播教学的装置，其特征在于，所述装置应用于第一终端，所述装置包括：
第一显示模块，用于在第一课程的直播教学界面中，在第一显示层显示所述第一课程对应的三维场景动画；
第二显示块，用于获取教师直播视频，在第二显示层显示所述教师直播视频，其中，所述第二显示层位于所述第一显示层的下层；
第三显示模块，用于获取学生直播视频，在第三显示层显示所述学生直播视频，其中，所述第三显示层位于所述第一显示层的上层。
11.一种第一终端，其特征在于，所述第一终端包括处理器和存储器，所述存储器中存储有至少一条指令，所述指令由所述处理器加载并执行以实现如权利要求1至权利要求9任一项所述的直播教学的方法所执行的操作。
12.一种计算机可读存储介质，其特征在于，所述存储介质中存储有至少一条指令，所述指令由处理器加载并执行以实现如权利要求1至权利要求9任一项所述的直播教学的方法所执行的操作。
直播教学的方法、装置、终端和存储介质
技术领域
[0001] 本申请涉及互联网技术领域，特别涉及一种直播教学的方法、装置、终端和存储介质。
背景技术
[0002] 随着人们生活水平提高和教育事业的不断发展，越来越多的家长开始关注孩子幼儿时的教学。而直播教学作为新兴的教学方式，得益于其时间安排相比真实课堂教学更加灵活，正逐渐被家长们所选择，作为孩子幼儿时期的教学方式。
[0003] 目前，直播教学通常采用类似于即时通讯应用程序的方式实现。即，学生和老师之间进行视频通话，这样在学生端可以看到老师的教学画面，这里老师的教学画面即为老师侧的摄像头所拍摄的画面。
[0004] 在实现本申请的过程中，发明人发现相关技术至少存在以下问题：
[0005] 在相关技术中，学生端看见的教学画面和日常的即时通讯应用程序的视频通话相同，只是显示老师侧摄像头所拍摄到的画面。对于幼儿学生来说这样的教学画面相对枯燥，吸引力不足，导致学生的学习效率的较低。
发明内容
[0006] 本申请实施例提供了一种直播教学的方法、装置、终端和存储介质，能够解决相关技术中教学画面枯燥导致的学生学习效率低的问题。所述技术方案如下：
[0007] 第一方面、提供了一种直播教学的方法，所述方法包括：
[0008] 在第一课程的直播教学界面中，在第一显示层显示所述第一课程对应的三维场景动画；
[0009] 获取教师直播视频，在第二显示层显示所述教师直播视频，其中，所述第二显示层位于所述第一显示层的下层；
[0010] 获取学生直播视频，在第三显示层显示所述学生直播视频，其中，所述第三显示层位于所述第一显示层的上层。
[0011] 在一种可能的实现方式中，所述第一终端为学生终端，所述在第一显示层显示所述第一课程对应的三维场景动画，包括：
[0012] 在第一显示层显示所述第一课程非全屏对应的三维场景动画；
[0013] 所述获取教师直播视频，在第二显示层显示所述教师直播视频，包括：
[0014] 获取第二终端通过直播服务器发送的教师直播视频，在第二显示层全屏显示所述教师直播视频，其中，所述第二终端为教师终端；
[0015] 所述获取学生直播视频，在第三显示层显示所述学生直播视频，包括：
[0016] 通过拍摄装置获取学生直播视频，在第三显示层非全屏显示所述学生直播视频。
[0017] 在一种可能的实现方式中，所述第一终端为教师终端，所述在第一显示层显示所述第一课程对应的三维场景动画，包括：
[0018] 在第一显示层显示所述第一课程非全屏对应的三维场景动画；
[0019] 所述获取教师直播视频，在第二显示层显示所述教师直播视频，包括：
[0020] 通过拍摄装置获取教师直播视频，在第二显示层非全屏显示所述教师直播视频，所述三维场景动画的显示区域小于所述教师直播视频的显示区域；
[0021] 所述获取学生直播视频，在第三显示层显示所述学生直播视频，包括：
[0022] 获取第二终端通过直播服务器发送的学生直播视频，在第三显示层非全屏显示所述学生直播视频。
[0023] 在一种可能的实现方式中，所述方法还包括：
[0024] 当检测到对所述三维场景动画中目标道具的选择操作时，控制所述目标道具执行所述选择操作对应的预设动作，和/或播放所述选择操作对应的预设音频。
[0025] 在一种可能的实现方式中，当检测到对所述三维场景动画中目标道具的选择操作时，控制所述目标道具执行所述选择操作对应的预设动作，包括：
[0026] 当检测到对所述三维场景动画中目标道具的选择操作时，向双端同步服务器发送目标道具控制消息，以使所述双端同步服务器向所述第一终端和第二终端同时转发所述控制消息；
[0027] 接收所述目标道具控制消息，控制所述目标道具执行所述第一选择操作对应的预设动作。
[0028] 在一种可能的实现方式中，所述第一终端为学生终端，所述方法还包括：
[0029] 接收第一音频的领读指令，播放所述第一音频；
[0030] 接收第一学生跟读音频，向所述第二终端发送所述第一学生跟读音频。
[0031] 在一种可能的实现方式中，所述第一终端为学生终端，所述方法还包括：
[0032] 显示第二课程的学生自学界面；
[0033] 在所述学生自学界面中，全屏显示所述第二课程对应的三维场景动画；
[0034] 接收第二音频的领读指令，播放所述第二音频；
[0035] 接收第二学生跟读音频，将所述第二音频和所述第二学生跟读音频输入预先训练的语音识别模型，确定所述第二音频和所述第二学生跟读音频的相似度；
[0036] 如果所述相似度大于预设阈值，则在所述学生自学界面显示虚拟奖励物品。
[0037] 在一种可能的实现方式中，所述第一终端为教师终端，所述方法还包括：
[0038] 当检测到添加目标魔法表情的触发事件时，获取所述目标魔法表情；
[0040] 在所述各帧图像中的人脸区域添加所述目标魔法表情。
[0041] 在一种可能的实现方式中，所述当检测到添加目标魔法表情的触发事件时，获取所述目标魔法表情，包括：
[0042] 当接收到对所述目标魔法表情的选择指令时，获取所述目标魔法表情。
[0043] 第二方面、提供了一种直播教学的装置，所述装置应用于第一终端，所述装置包括：
[0044] 第一显示模块，用于在第一课程的直播教学界面中，在第一显示层显示所述第一课程对应的三维场景动画；
[0045] 第二显示块，用于获取教师直播视频，在第二显示层显示所述教师直播视频，其中，所述第二显示层位于所述第一显示层的下层；
[0046] 第三显示模块，用于获取学生直播视频，在第三显示层显示所述学生直播视频，其中，所述第三显示层位于所述第一显示层的上层。
[0047] 在一种可能的实现方式中，所述第一终端为学生终端，所述第一显示模块，用于：
[0048] 在第一显示层显示所述第一课程非全屏对应的三维场景动画；
[0049] 所述第二显示模块，用于：
[0050] 获取第二终端通过直播服务器发送的教师直播视频，在第二显示层全屏显示所述教师直播视频，其中，所述第二终端为教师终端；
[0051] 所述第三显示模块，用于：
[0052] 通过拍摄装置获取学生直播视频，在第三显示层非全屏显示所述学生直播视频。
[0053] 在一种可能的实现方式中，所述第一终端为教师终端，所述第一显示模块，用于：
[0054] 在第一显示层显示所述第一课程非全屏对应的三维场景动画；
[0055] 所述第二显示模块，用于：
[0056] 通过拍摄装置获取教师直播视频，在第二显示层非全屏显示所述教师直播视频，所述三维场景动画的显示区域小于所述教师直播视频的显示区域；
[0057] 所述第三显示模块，用于：
[0058] 获取第二终端通过直播服务器发送的学生直播视频，在第三显示层非全屏显示所述学生直播视频。
[0059] 在一种可能的实现方式中，所述装置还包括：
[0060] 控制模块，用于当检测到对所述三维场景动画中目标道具的选择操作时，控制所述目标道具执行所述选择操作对应的预设动作，和/或播放所述选择操作对应的预设音频。
[0061] 在一种可能的实现方式中，所述控制模块，用于：
[0062] 当检测到对所述三维场景动画中目标道具的选择操作时，向双端同步服务器发送目标道具控制消息，以使所述双端同步服务器向所述第一终端和第二终端同时转发所述控制消息；
[0063] 接收所述目标道具控制消息，控制所述目标道具执行所述第一选择操作对应的预设动作。
[0064] 在一种可能的实现方式中，所述第一终端为学生终端，所述装置还包括：
[0065] 播放模块，用于接收第一音频的播放指令，播放所述第一音频；
[0066] 发送模块，用于接收第一学生跟读音频，向所述第二终端发送所述第一学生跟读音频。
[0067] 在一种可能的实现方式中，所述第一终端为学生终端，所述装置还包括：
[0068] 第四显示模块，用于显示第二课程的学生自学界面，在所述学生自学界面中，全屏显示所述第二课程对应的三维场景动画；
[0069] 接收模块，用于接收第二音频的播放指令，播放所述第二音频；
[0070] 确定模块，用于接收第二学生跟读音频，将所述第二音频和所述第二学生跟读音频输入预先训练的语音识别模型，确定所述第二音频和所述第二学生跟读音频的相似度；
[0071] 奖励模块，用于如果所述相似度大于预设阈值，则在所述学生自学界面显示虚拟奖励物品。
[0072] 在一种可能的实现方式中，所述第一终端为教师终端，所述装置还包括：
[0073] 检测模块，用于当检测到添加目标虚拟表情的触发事件时，获取所述目标虚拟表情；
[0074] 确定模块，用于对所述教师直播视频中的各帧图像进行人脸识别，确定所述各帧图像中的人脸区域；
[0075] 在所述各帧图像中的人脸区域添加所述目标虚拟表情。
[0076] 在一种可能的实现方式中，所述检测模块，用于：
[0077] 当接收到对所述目标虚拟表情的选择指令时，获取所述目标虚拟表情。
[0078] 第三方面，提供了一种第一终端，所述第一终端包括处理器和存储器，所述存储器中存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现如上述第一方面所述的直播教学的方法。
[0079] 第四方面，提供了一种计算机可读存储介质，所述存储介质中存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现如上述第一方面所述的直播教学的方法。
[0080] 本申请实施例提供的技术方案带来的有益效果是：
[0081] 终端可以在第一课程的直播教学界面中，在第一显示层非全屏显示该第一课程对应的三维场景动画。并且，可以获取教师直播视频，在第一显示层下层的第二显示层显示。另外，还可以获取到学生直播视频，在第一显示层上层的第三显示层显示。即，将教师直播视频、学生直播视频以及课程对应的三维场景动画融合，在同一界面的不同显示层显示。学生在上课时，除了可以看到教师直播视频外，还可以看到课程对应的三维场景动画，对于幼儿来说，三维场景动画具有更大的吸引力，这样，可以使学生注意力更加集中，进而，使学生的学习效率更高。
附图说明
附图说明
[0082] 为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0083] 图1是本申请实施例提供的一种实施环境的示意图；
[0084] 图2是本申请实施例提供的一种直播教学的方法流程图；
[0085] 图3是本申请实施例提供的一种直播教学界面的示意图；
[0086] 图4是本申请实施例提供的一种直播教学界面的示意图；
[0087] 图5是本申请实施例提供的一种直播教学的装置结构示意图；
[0088] 图6是本申请实施例提供的一种终端的结构示意图。
具体实施方式
[0089] 为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。
[0090] 图1是本申请实施例提供的一种实施环境的示意图。参见图1，在该实施环境中可以包括有第一终端、第二终端以及直播服务器。其中，第一服终端和第二终端中一个为学生终端，另一个则为教师终端。第一终端和第二终端之间通过直播服务器发送直播视频。即，第一终端可以将直播视频发送给直播服务器，直播服务器再将该直播视频发送给第二终端，以使第二终端接收并显示该第一终端的直播视频。同样的，第二终端也可以将直播视频发送给直播服务器，直播服务器再将该直播视频发送给第一终端，以使第二终端接收并显示该第一终端的直播视频。
[0091] 图2是本申请实施例提供的一种直播教学的方法流程图，该方法可以由第一终端实现。参见图2，该方法的处理流程可以包括如下步骤：
[0092] 步骤201、在第一课程的直播教学界面中，在第一显示层显示该第一课程对应的三维场景动画。
[0093] 其中，在直播教学界面中可以对不同的画面在不同的显示层显示。
[0094] 在实施中，技术人员预先对应于每个课程，制作三维场景动画。三维场景动画的内容与对应的课程内容相关，以便起到辅助教学的目的。例如，课程为学习英文单词“car(小汽车)”以及与car相关的一些内容，那么，该课程对应的三维场景动画中可以包括有运动的小汽车的三维模型，在互相交流的小朋友的三维模型等等。
[0095] 技术人员可以使用unity工具制作三维场景动画，其中，unity工具也称为unity3D工具，是一种让用户可以创建诸如三维视频游戏、建筑可视化、实时三维动画等类型互动内容的综合型游戏开发工具。下面对于使用unity工具制作三维场景动画进行简要说明。
[0096] 技术人员启动unity工具，创建三维场景，将需要的道具放置在创建的场景中，摆放好位置，在场景中放置摄像机，并通过该摄像机渲染场景，得到三维场景动画。最后，导出为XXX.unity文件，其中，XXX为技术人员对该unity文件的命名，可以自行设置。
[0097] 在第一终端中可以安装有直播教学应用程序，当直播应用程序开启后，用户可以选择其中的任一课程进行学习。当用户进入任一课程的直播教学界面后，终端便可以运行unity工具加载上述XXX.unity文件，以使得三维场景动画可以在该直播界面中的第一显示层显示。
[0098] 另外，三维场景动画在不同的直播教学场景中的显示区域可以不同。例如，第一终端如果是学生侧终端，相应的，直播教学应用程序为学生直播教学应用程序，三维场景动画在如图3所示的学生直播教学应用程序的直播教学界面中的相应区域显示。又例如，第一终端如果是教师侧终端，相应的，直播教学应用程序为教师直播教学应用程序，三维场景动画在在如图4所示教师直播教学应用程序的直播教学界面中的相应区域显示。
[0099] 步骤202、获取教师直播视频，在第二显示层显示所述教师直播视频，其中，第二显示层位于第一显示层的下层。
[0100] 在实施中，在直播教学界面的三维场景动画的底层(即本申请实施例中的第二显示层)放置一张Raw Image(原始图片)，在获取到教师直播视频后，将教师直播视频的每一帧渲染在Raw Image进行显示，即可呈现出教师直播视频在三维场景动画的下层显示的效果。
[0101] 另外，对于第一终端为教师终端或者学生终端，其获取教师直播视频的方式不同，下面分别对第一终端为教师终端，以及第一终端为学生终端的情况分别进行说明。
[0102] 第一终端为学生终端，则第一终端可以获取第二终端通过直播服务器发送的教师直播视频，该第二终端为教师终端。即，教师在教师终端登录教师直播教学应用程序，并进行入任一课程的直播教学界面，学生也可以在学生端登录对应的学生直播教学应用程序，并进入与教师直播应用程序中相同课程的直播教学界面。教师终端将教师直播视频通过直播服务器，发送至学生终端，学生终端在直播教学界面的第二显示层显示教师直播视频。另外，如图3所示，该教师直播视频在学生终端的第二显示层中可以全屏显示，并且第二显示层位于第一显示层的下层。
[0103] 第一终端为教师终端，则第一终端可以通过摄像装置直接获取到教师直播视频，并且在直播教学界面中的第二显示层显示。其中，摄像装置可以为第一终端内置的摄像部件，也可以为第一终端通过信号线外接的摄像头，本申请实施例对此不做限定。另外，如图4所示，该教师直播视频在学生终端的第二显示层中可以非全屏显示，同样的，第二显示层位于第一显示层的下层。
[0104] 步骤203、获取学生直播视频，在第三显示层非全屏显示学生直播视频，其中，所述第三显示层位于所述第一显示层的上层。
[0105] 在实施中，对于第一终端为教师终端或者学生终端，其获取学生直播视频的方式不同，下面分别对第一终端为教师终端，以及第一终端为学生终端的情况分别进行说明。
[0106] 第一终端为教师终端，则第一终端可以获取第二终端通过直播服务器发送的学生直播视频，该第二终端为学生终端。学生终端在进入学生直播应用程序的直播教学界面后，学生终端将学生直播视频通过直播服务器，发送至教师终端，教师终端在直播教学界面的第三显示层显示学生直播视频。另外，如图4所示，该学生直播视频在教师终端的第三显示层中可以非全屏显示，并且第三显示层位于第一显示层的上层。
[0107] 第一终端为学生终端，则第一终端可以通过摄像装置直接获取到学生直播视频，并且在直播教学界面中的第二显示层显示。另外，如图3所示，该教师直播视频在学生终端的第三显示层中可以非全屏显示，同样的，第三显示层位于第一显示层的上层。
[0108] 另外，还需说明的是上述图3和图4，仅为本申请实施例提供的一种可能的直播教学界面。对于直播教学界面中的教师直播视频、学生直播视频以及三维场景动画在直播教学界面中的布局本申请不做限定。
[0109] 在一种可能的实现方式中，为了增加直播教学的趣味性，使学生更好的投入到学习中，对于直播教学界面的三维场景动画中的道具，可以由用户控制其执行一些动作，相应的，处理可以如下：当检测到对所述三维场景动画中目标道具的选择操作时，控制所述目标道具执行所述选择操作对应的预设动作，和/或播放所述选择操作对应的预设音频。
[0110] 在实施中，用户可以点击直播教学界面中的三维场景动画的道具，来控制道具执行预设动作。在实现该效果时，第一终端可以采用如下方法检测用户对道具的选择操作。
[0111] 用户对三维场景动画中的道具行选择操作时，如点击操作，三维场景中的摄像机会在用户点击位置向三维场景中发射一条射线。另外，在三维场景中的需要进行交互的道具可以包括BoxColider(盒碰撞器)组件。那么，当该射线接触到包括BoxColider组件的道具时，EasyTouch插件会返回触碰到的目标道具的标识。
[0112] 第一终端根据目标道具的标识，在存储的道具的标识和预设动作的对应关系中，确定出目标道具的标识对应的预设动作，并控制该目标道具执行该预设动作。例如，对于目标道具为小汽车，预设动作可以为旋转小汽车，控制小汽车前进、停止移动等等。
[0113] 当然，在上述对应关系中不仅限于预设动作，还可以有预设音频，即当确定出目标道具的标识对应的预设音频后，通过音频插件，播放该预设音频。其中，音频插件可以为FMOD音频插件。例如，对于目标道具为小汽车，预设音频可以为汽车鸣笛声。
[0114] 在一种可能的实现方式中，为了实现教师终端中显示的三维场景动画和学生终端中显示的三维场景动画同步，相应的，处理可以如下：当检测到对所述三维场景动画中目标道具的选择操作时，向双端同步服务器发送目标道具控制消息，以使所述双端同步服务器向所述第一终端和第二终端同时转发所述控制消息；接收所述目标道具控制消息，控制所述目标道具执行所述第一选择操作对应的预设动作。
[0115] 在实施中，当第一终端通过上述方法检测到用户对目标道具进行选择操作后，可以不立即执行该选择操作。而是，先向双端同步服务器发送目标道具控制消息，该目标道具控制消息中可以携带有目标道具的标识。当双端同步服务器接收到目标道具控制消息后，同时向第一终端和第二终端转发该目标道具控制消息。第一终端和第二终端接收到目标道具控制消息后，可以获取其中的目标道具标识，以确定对应的预设动作，并控制目标道具执行该预设动作。
[0116] 在一种可能的实现方式中，本申请实施例中学生除跟随教师阅读外，还可以给学生提供跟读模式，相应的，处理可以如下：接收第一音频的领读指令，播放第一音频，接收第一学生跟读音频，向第二终端发送第一学生跟读音频。
[0117] 在实施中，第一终端可以为学生终端，相应的，第二终端为教师终端。在教师终端的直播教学界面中，可以有跟读功能选项，教师选择该跟读功能选项后，在教师终端的直播教学界面进入跟读界面。同时，教师终端可以通过双端同步服务器向学生终端发送跟读消息，学生终端接收到该跟读消息后，使直播教学界面同样进入跟读界面。教师可以在教师终端中的跟读界面选择开始领读的选项，则教师终端可以通过双端同步服务器向学生终端发送领读指令。学生终端接收到领读指令后，可以开始播放预设音频，该预设音频为预先制作的一群小朋友朗读的音频，这样，可以对于学生有更好的吸引力，可以更好的调动学生跟读学习的积极性。学生终端的麦克风采集学生的跟读音频，并将跟读音频发送给教师终端，教师终端播放学生的跟读音频，教师可以根据学生跟读质量的好坏，给学生送出虚拟奖励物品。例如，学生跟读质量较高的话，可以给学生一颗星，则在学生终端的跟读界面上方则可以增加一颗星。
[0118] 在一种可能的实现方式中，还可以给学生提供自学跟读功能，相应的，处理可以如下：显示第二课程的学生自学界面，在学生自学界面中，全屏显示第二课程对应的三维场景动画，接收第二音频的领读指令，播放第二音频。接收第二学生跟读音频，将第二音频和所述第二学生跟读音频输入预先训练的语音识别模型，确定第二音频和所述第二学生跟读音频的相似度，如果相似度大于预设阈值，则在学生自学界面显示虚拟奖励物品。
[0119] 在实施中，在直播教学以外，学生还可以进入直播教学应用程序的学生自学界面，在该界面中可以全屏显示三维场景动画。学生可以选择学生自学界面中的领读功能选项，则第一终端(学生终端)开始播放对应的第二音频，学生可以跟着第二音频进行朗读，第一终端可以通过麦克风获取学生的第二跟读音频，并将第二跟读音频和第二音频输入预先训练的语音识别模型中，确定第二跟读音频和第二音频的相似度，如果相似度大于预设阈值，则表明学生跟读质量较高，可以在学生自学界面显示预设的虚拟奖励物品，如一颗星星。
[0120] 在一种可能的实现方式中，在直播教学过程中，为了吸引学生的注意力，使学生更加专注的观看教师直播，可以有如下处理：当检测到添加目标魔法表情的触发事件时，获取目标魔法表情，对教师直播视频中的各帧图像进行人脸识别，确定所述各帧图像中的人脸区域，在各帧图像中的人脸区域添加目标魔法表情。
[0121] 在实施中，第一终端为教师终端，在如图4所示的教师终端的直播教学界面中，可以显示有魔法表情样式选项，以及表情选项，教师可以根据学生的实时表现选择一种魔法表情样式，并为该魔法表情样式选择一种表情。则教师终端在获取到教师直播视频时，对教师直播视频的每一帧做人脸识别，并在识别到的人脸区域添加选择的魔法表情。例如，教师认为学生表现不好，则教师可以选项一个魔法表情样式，并且选择生气的表情，以表示对学生表现的不满意。相应的，教师终端可以在通过直播服务器向学生终端发送教师直播视频时，将添加魔法表情后的教师直播视频发送给学生终端。则学生终端可以在直播教学界面中显示该添加有魔法表情的教师直播视频。
[0122] 除此之外，教师还可以在教师终端开启自适应添加魔法表情功能，则当教师判断学生跟读质量较好，或者课堂表现较好时，可以给学生送出虚拟奖励物品，当检测到教师给学生送出虚拟奖励物品后，则可以获取微笑的魔法表情，并在教师直播视频的每一帧中添加该微笑的魔法表情。同样的，教师终端可以在通过直播服务器向学生终端发送教师直播视频时，将添加魔法表情后的教师直播视频发送给学生终端。则学生终端可以在直播教学界面中显示该添加有魔法表情的教师直播视频。
[0123] 本申请实施例中，终端可以在第一课程的直播教学界面中，在第一显示层非全屏显示该第一课程对应的三维场景动画。并且，可以获取教师直播视频，在第一显示层下层的第二显示层全屏显示。另外，还可以获取到学生直播视频，在第一显示层上层的第三显示层非全屏显示。即，将教师直播视频、学生直播视频以及课程对应的三维场景动画融合，在同一界面的不同显示层显示。学生在上课时，除了可以看到教师直播视频外，还可以看到课程对应的三维场景动画，对于幼儿来说，三维场景动画具有更大的吸引力，这样，可以使学生注意力更加集中，进而，使学生的学习效率更高。
[0124] 基于相同的技术构思，本申请实施例还提供了一种直播教学的装置，如图5所示，该装置包括：
[0125] 第一显示模块510，用于在第一课程的直播教学界面中，在第一显示层显示所述第一课程对应的三维场景动画；
[0126] 第二显示块520，用于获取教师直播视频，在第二显示层显示所述教师直播视频，其中，所述第二显示层位于所述第一显示层的下层；
[0127] 第三显示模块530，用于获取学生直播视频，在第三显示层显示所述学生直播视频，其中，所述第三显示层位于所述第一显示层的上层。
[0128] 在一种可能的实现方式中，所述第一终端为学生终端，所述第一显示模块510，用于：
[0129] 在第一显示层显示所述第一课程非全屏对应的三维场景动画；
[0130] 所述第二显示模块520，用于：
[0131] 获取第二终端通过直播服务器发送的教师直播视频，在第二显示层全屏显示所述教师直播视频，其中，所述第二终端为教师终端；
[0132] 所述第三显示模块530，用于：
[0133] 通过拍摄装置获取学生直播视频，在第三显示层非全屏显示所述学生直播视频。
[0134] 在一种可能的实现方式中，所述第一终端为教师终端，所述第一显示模块510，用于：
[0135] 在第一显示层显示所述第一课程非全屏对应的三维场景动画；
[0136] 所述第二显示模块520，用于：
[0137] 通过拍摄装置获取教师直播视频，在第二显示层非全屏显示所述教师直播视频，所述三维场景动画的显示区域小于所述教师直播视频的显示区域；
[0138] 所述第三显示模块530，用于：
[0139] 获取第二终端通过直播服务器发送的学生直播视频，在第三显示层非全屏显示所述学生直播视频。
[0140] 在一种可能的实现方式中，所述装置还包括：
[0141] 控制模块，用于当检测到对所述三维场景动画中目标道具的选择操作时，控制所述目标道具执行所述选择操作对应的预设动作，和/或播放所述选择操作对应的预设音频。
[0142] 在一种可能的实现方式中，所述控制模块，用于：
[0143] 当检测到对所述三维场景动画中目标道具的选择操作时，向双端同步服务器发送目标道具控制消息，以使所述双端同步服务器向所述第一终端和第二终端同时转发所述控制消息；
[0144] 接收所述目标道具控制消息，控制所述目标道具执行所述第一选择操作对应的预设动作。
[0145] 在一种可能的实现方式中，所述第一终端为学生终端，所述装置还包括：
[0146] 播放模块，用于接收第一音频的播放指令，播放所述第一音频；
[0147] 发送模块，用于接收第一学生跟读音频，向所述第二终端发送所述第一学生跟读音频。
[0148] 在一种可能的实现方式中，所述第一终端为学生终端，所述装置还包括：
[0149] 第四显示模块，用于显示第二课程的学生自学界面，在所述学生自学界面中，全屏显示所述第二课程对应的三维场景动画；
[0150] 接收模块，用于接收第二音频的播放指令，播放所述第二音频；
[0151] 确定模块，用于接收第二学生跟读音频，将所述第二音频和所述第二学生跟读音频输入预先训练的语音识别模型，确定所述第二音频和所述第二学生跟读音频的相似度；
[0152] 奖励模块，用于如果所述相似度大于预设阈值，则在所述学生自学界面显示虚拟奖励物品。
[0153] 在一种可能的实现方式中，所述第一终端为教师终端，所述装置还包括：
[0154] 检测模块，用于当检测到添加目标虚拟表情的触发事件时，获取所述目标虚拟表情；
[0155] 确定模块，用于对所述教师直播视频中的各帧图像进行人脸识别，确定所述各帧图像中的人脸区域；
[0156] 在所述各帧图像中的人脸区域添加所述目标虚拟表情。
[0157] 在一种可能的实现方式中，所述检测模块，用于：
[0158] 当接收到对所述目标虚拟表情的选择指令时，获取所述目标虚拟表情。
[0159] 需要说明的是：上述实施例提供的直播教学的装置在进行直播教学时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将第一终端的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的直播教学的装置与直播教学的方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
[0160] 图6示出了本申请一个示例性实施例提供的终端600的结构框图。该终端600可以是：智能手机、平板电脑、MP3播放器(Moving Picture Experts Group Audio Layer III，动态影像专家压缩标准音频层面3)、MP4(Moving Picture Experts Group Audio Layer IV，动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端600还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
[0161] 通常，终端600包括有：处理器601和存储器602。
[0162] 处理器601可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器601可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)、PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器601也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(Central Processing Unit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器601可以在集成有GPU(Graphics Processing Unit，图像处理器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器601还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。
[0163] 存储器602可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器602还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器602中的非暂态的计算机可读存储介质用于存储至少一个指令，该至少一个指令用于被处理器601所执行以实现本申请中方法实施例提供的直播教学的方法。
[0164] 在一些实施例中，终端600还可选包括有：外围设备接口603和至少一个外围设备。处理器601、存储器602和外围设备接口603之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口603相连。具体地，外围设备包括：射频电路
604、触摸显示屏605、摄像头606、音频电路607、定位组件608和电源609中的至少一种。
604、触摸显示屏605、摄像头606、音频电路607、定位组件608和电源609中的至少一种。
[0165] 外围设备接口603可被用于将I/O(Input/Output，输入/输出)相关的至少一个外围设备连接到处理器601和存储器602。在一些实施例中，处理器601、存储器602和外围设备接口603被集成在同一芯片或电路板上；在一些其他实施例中，处理器601、存储器602和外围设备接口603中的任意一个或两个可以在单独的芯片或电路板上实现，本实施例对此不加以限定。
[0166] 射频电路604用于接收和发射RF(Radio Frequency，射频)信号，也称电磁信号。射频电路604通过电磁信号与通信网络以及其他通信设备进行通信。射频电路604将电信号转换为电磁信号进行发送，或者，将接收到的电磁信号转换为电信号。可选地，射频电路604包括：天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路604可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于：城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity，无线保真)网络。在一些实施例中，射频电路604还可以包括NFC(Near Field Communication，近距离无线通信)有关的电路，本申请对此不加以限定。
[0167] 显示屏605用于显示UI(User Interface，用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏605是触摸显示屏时，显示屏605还具有采集在显示屏605的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器601进行处理。此时，显示屏605还可以用于提供虚拟按钮和/或虚拟键盘，也称软按钮和/或软键盘。在一些实施例中，显示屏605可以为一个，设置终端600的前面板；在另一些实施例中，显示屏605可以为至少两个，分别设置在终端600的不同表面或呈折叠设计；在再一些实施例中，显示屏605可以是柔性显示屏，设置在终端600的弯曲表面上或折叠面上。甚至，显示屏605还可以设置成非矩形的不规则图形，也即异形屏。显示屏605可以采用LCD(Liquid Crystal Display，液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
[0168] 摄像头组件606用于采集图像或视频。可选地，摄像头组件606包括前置摄像头和后置摄像头。通常，前置摄像头设置在终端的前面板，后置摄像头设置在终端的背面。在一些实施例中，后置摄像头为至少两个，分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种，以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality，虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中，摄像头组件606还可以包括闪光灯。闪光灯可以是单色温闪光灯，也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合，可以用于不同色温下的光线补偿。
[0169] 音频电路607可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波，并将声波转换为电信号输入至处理器601进行处理，或者输入至射频电路604以实现语音通信。出于立体声采集或降噪的目的，麦克风可以为多个，分别设置在终端600的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器601或射频电路
604的电信号转换为声波。扬声器可以是传统的薄膜扬声器，也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时，不仅可以将电信号转换为人类可听见的声波，也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中，音频电路607还可以包括耳机插孔。
604的电信号转换为声波。扬声器可以是传统的薄膜扬声器，也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时，不仅可以将电信号转换为人类可听见的声波，也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中，音频电路607还可以包括耳机插孔。
[0170] 定位组件608用于定位终端600的当前地理位置，以实现导航或LBS(Location Based Service，基于位置的服务)。定位组件608可以是基于美国的GPS(Global Positioning System，全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。
[0171] 电源609用于为终端600中的各个组件进行供电。电源609可以是交流电、直流电、一次性电池或可充电电池。当电源609包括可充电电池时，该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。
[0172] 在一些实施例中，终端600还包括有一个或多个传感器610。该一个或多个传感器610包括但不限于：加速度传感器611、陀螺仪传感器612、压力传感器613、指纹传感器614、光学传感器615以及接近传感器616。
[0173] 加速度传感器611可以检测以终端600建立的坐标系的三个坐标轴上的加速度大小。比如，加速度传感器611可以用于检测重力加速度在三个坐标轴上的分量。处理器601可以根据加速度传感器611采集的重力加速度信号，控制触摸显示屏605以横向视图或纵向视图进行用户界面的显示。加速度传感器611还可以用于游戏或者用户的运动数据的采集。
[0174] 陀螺仪传感器612可以检测终端600的机体方向及转动角度，陀螺仪传感器612可以与加速度传感器611协同采集用户对终端600的3D动作。处理器601根据陀螺仪传感器612采集的数据，可以实现如下功能：动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
[0175] 压力传感器613可以设置在终端600的侧边框和/或触摸显示屏605的下层。当压力传感器613设置在终端600的侧边框时，可以检测用户对终端600的握持信号，由处理器601根据压力传感器613采集的握持信号进行左右手识别或快捷操作。当压力传感器613设置在触摸显示屏605的下层时，由处理器601根据用户对触摸显示屏605的压力操作，实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
[0176] 指纹传感器614用于采集用户的指纹，由处理器601根据指纹传感器614采集到的指纹识别用户的身份，或者，由指纹传感器614根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时，由处理器601授权该用户执行相关的敏感操作，该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器614可以被设置终端600的正面、背面或侧面。当终端600上设置有物理按键或厂商Logo时，指纹传感器614可以与物理按键或厂商Logo集成在一起。
[0177] 光学传感器615用于采集环境光强度。在一个实施例中，处理器601可以根据光学传感器615采集的环境光强度，控制触摸显示屏605的显示亮度。具体地，当环境光强度较高时，调高触摸显示屏605的显示亮度；当环境光强度较低时，调低触摸显示屏605的显示亮度。在另一个实施例中，处理器601还可以根据光学传感器615采集的环境光强度，动态调整摄像头组件606的拍摄参数。
[0178] 接近传感器616，也称距离传感器，通常设置在终端600的前面板。接近传感器616用于采集用户与终端600的正面之间的距离。在一个实施例中，当接近传感器616检测到用户与终端600的正面之间的距离逐渐变小时，由处理器601控制触摸显示屏605从亮屏状态切换为息屏状态；当接近传感器616检测到用户与终端600的正面之间的距离逐渐变大时，由处理器601控制触摸显示屏605从息屏状态切换为亮屏状态。
[0179] 本领域技术人员可以理解，图6中示出的结构并不构成对终端600的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。
[0180] 在示例性实施例中，还提供了一种计算机可读存储介质，例如包括指令的存储器，上述指令可由终端中的处理器执行以完成下述实施例中直播教学的方法。例如，所述计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
[0181] 本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 基于上下文的通信会话桥接 | 2020-05-08 | 509 |
| 一种小程序调试方法、装置、设备及存储介质 | 2020-05-08 | 802 |
| 一种应用于俄罗斯方块游戏中的方块控制方法及装置 | 2020-05-08 | 57 |
| 核电站汽轮机厂房起重作业仿真培训方法 | 2020-05-11 | 654 |
| 直播间虚拟礼物交互方法、电子设备和装置 | 2020-05-08 | 104 |
| 一种遥控器、智能设备及配置方法 | 2020-05-08 | 588 |
| 用于眼睛跟踪的个性化神经网络 | 2020-05-08 | 326 |
| 直播教学的方法、装置、终端和存储介质 | 2020-05-11 | 758 |
| 一种基于虚拟现实技术的虚拟建筑系统 | 2020-05-08 | 467 |
| 一种敏感设备电压暂降耐受能力自动测试系统及方法 | 2020-05-08 | 473 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
分析报告
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
QQ群二维码
意见反馈
意见反馈