首页 / 专利库 / 专利权 / 专利合作条约 / 第I章 / 国际申请 / 明显错误 / 一种全景位自适应学生图像分析控制方法

一种全景位自适应学生图像分析控制方法

阅读:1009发布:2020-09-25

专利汇可以提供一种全景位自适应学生图像分析控制方法专利检索,专利查询,专利分析的服务。并且本 发明 涉及一种全景位自适应学生 图像分析 控制方法,用于课堂学生视频拍摄。该控制方法,其系统包括嵌入式主机、显示器、一个全景摄像头和一个近景摄像头,嵌入式主机用于分析判断摄像头传来的数据,并通过显示器显示主画面,两个摄像头分别拍摄课堂内学生全景和近景,其特征是,嵌入式主机对于摄像头传来的图像数据进行实时记录,并进行分析后剔除干扰,若发现目标起立,则控制摄像头完成远景和近景之间的切换动作,进一步判断目标是否坐下,进入下一个工作周期。本方法减少了手工拍摄中存在的各种人为因素,在无人工干预的情况下,辅助摄像机进行 跟踪 拍摄。,下面是一种全景位自适应学生图像分析控制方法专利的具体信息内容。

1.一种全景位自适应学生图像分析控制方法,其系统包括嵌入式主机、显示器、一个全景摄像头和一个近景摄像头,嵌入式主机用于分析判断摄像头传来的数据,并通过显示器显示主画面,两个摄像头分别拍摄课堂内学生全景和近景,其特征是,嵌入式主机对于摄像头传来的图像数据进行实时记录,并进行分析后剔除干扰,若发现目标起立,则控制摄像头完成远景和近景之间的切换动作,进一步判断目标是否坐下,进入下一个工作周期。
2.根据权利要求1所述的全景位自适应学生图像分析控制方法,其特征是,嵌入式主机对于摄像头的分析控制方法如下:
控制一,对课堂内所有学生动作进行跟踪和记录,生成可回溯的图像队列;
控制二,对控制一产生的数据进行组装和拆分,将多个有关联的细小目标组装成一个完整的运动目标;同时根据人体外形特征将大目标拆分成多个运动目标,并且抛弃不符合人体外形特征的大目标;
控制三,将控制二中所得到的目标和控制一中记录的该目标的图像队列进行联合特征分析,判断是否在一定时间段时目标没有发生明显的特征变化,消除明显变化的目标,以此来避免干扰;
控制四,跟踪目标尺寸分析出目标到摄像机的距离,根据计算出目标起立时运动的幅度;
控制五,将控制三中所得到的目标和控制一中记录的该目标的图像队列进行联合分析,计算出运行幅度符合控制四中结果的目标,并且标注为起立再进行定;
控制六,锁定起立目标后,发送全景切换命令,同时控制发送近景摄像头转动命令,控制近景摄像头运行;
控制七,根据近景摄像头命令回馈,判断近景摄像头转动到指定位置后,发送近景切换命令;
控制八,如果检测到多个目标起立,发送全景切换命令,切换到全景摄像头;
控制九,控制五中锁定的目标如果出现向下运行,认为目标已经坐下;
控制十,学生坐下后,交出摄像机控制权,切换为其它场景。
3.根据权利要求2所述的全景位自适应学生图像分析控制方法,其特征是,控制一,采用跨差异比较法,跨域4帧对图像差异进行比较,扩大差异阈值;比较方式采用R、G、B差异最大值方式,尽最大可能找出可能发生的变化;采集3*3的矩阵模型对计算的结果进行腐蚀操作,消除孤立的噪点,然后使用5*5的矩阵对结果膨胀操作,放大变化值。
4.根据权利要求2或3所述的全景位自适应学生图像分析控制方法,其特征是,控制一是将错误数据扔掉到,重新放入队列,生成可回溯2秒的图像队列。
5.根据权利要求2所述的全景位自适应学生图像分析控制方法,其特征是,基于控制一,控制二是将相连接的变化进行合并,形成外接矩形;将所有得到的外接矩形映射到一个二维矩阵,如果二维矩阵已经存在,并且矩形70%区域在二维矩阵对应的值上,则将该矩阵进行唯一性标识号,进一步通过大数据进行拆分操作。
6.根据权利要求2所述的全景位自适应学生图像分析控制方法,其特征是,控制三,对拥有唯一标识的矩形进行人体外形特征判断,采用边缘模型和头肩顶模形,剔除不符合的矩形。
7.根据权利要求2所述的全景位自适应学生图像分析控制方法,其特征是,控制四,根据目标到摄像机的距离,采用二次曲线+修正值的模式计算出运动的上、下、左、左幅度。
8.根据权利要求2所述的全景位自适应学生图像分析控制方法,其特征是,控制五,对控制一中的目标进行多帧判断,如果超过控制四中的运行幅度,则认为是备选起立目标;将备选起立目标采用反向直方图方式进行多帧特征判断,如果出现特征大幅变化,则认为是干扰,否则是真实的起立目标,进行锁定。
9.根据权利要求2所述的全景位自适应学生图像分析控制方法,其特征是,控制九中的运动幅度大于控制四中计算结果的60%,则认为坐下。
10.根据权利要求1所述的全景位自适应学生图像分析控制方法,其特征是,所述的全景摄像头和近景摄像头一起安装在教室黑板上方正中间,调整镜头画面,以能拍报出整个教室为宜;全景摄像头和近景摄像头所拍摄的画面的上边沿不超过后墙高度2.5米。

说明书全文

一种全景位自适应学生图像分析控制方法

技术领域

[0001] 本发明涉及一种全景位自适应学生图像分析控制方法,用于课堂学生视频拍摄。

背景技术

[0002] 现在教学录制环境当中,需要摄像头对学生课堂的活动进行拍摄,拍摄内容包括学生全景图像,学生近景图像。而传统的方式一种是采用人工的方式进行拍摄,人工拍摄不仅耗时耗,拍摄效果跟踪个人平高低而水平不一,并且还会严重的影响到正常的教学流程,干扰老师教学和学生听课;另一种方式是使用红外,声波等技术进行辅助拍摄,这种方式需要另外添加设备,并且增加了成本和日常维护的难度。
[0003] 因此需要一种全自动的,不安装任何第三方辅助摄设备的技术方案,通过图像内容分析出学生的各种动作,在无人工干预的情况下,辅助摄像机进行跟踪拍摄。
[0004] 中国发明专利公开号“103093654A”公开了“一种双摄像机交互式智能跟踪教学系统”,包括图像采集、摄像机控制模块、用户界面交互模块、线程交互模块、教师跟踪模块、学生检测模块、学生跟踪模块。在教学过程中,控制主机通过双路图像采集卡实时获取教师与学生摄像机的拍摄图像,通过利用基于图像处理技术的跟踪算法和检测算法的计算结果,选择适当的控制策略,合理安排信号之间的相互切换,并快速灵活准确的实现现场摄像机的摇摆和俯仰、缩放和聚焦等功能,保证教师时刻处于拍摄画面的适当位置,实现了对教师自动跟踪定位、学生全景显示及提问检测和板书时给予特写镜头等功能,从而实现了跟踪抗外界干扰、动作无特定限制、拍摄无专人值守的自动智能跟踪教学系统。该专利公开的技术方案所涉及的硬件模块较多,主要涉及七个模块,引入了需要手动操作的用户界面交互模块和摄像机控制模块,且运用的技术也较为繁琐,需要预设一些数值,例如老师的身高,教室的尺寸,摄像头的位置和度等非常具体的数据参数,这些都使得产品显得不够智能化,实际运用中会严重影响用户体验。

发明内容

[0005] 本发明目的在于提供一种能够解决现有技术中存在的上述问题,结构简单,连接方便,分析判断两个摄像头传来的数据,并根据分析到的数据控制多个景位的切换动作。
[0006] 本发明目的通过以下技术方案实现:一种全景位自适应学生图像分析控制方法,其系统包括嵌入式主机、显示器、一个全景摄像头和一个近景摄像头,嵌入式主机用于分析判断摄像头传来的数据,并通过显示器显示主画面,两个摄像头分别拍摄课堂内学生全景和近景,其特征是,嵌入式主机对于摄像头传来的图像数据进行实时记录,并进行分析后剔除干扰,若发现目标起立,则控制摄像头完成远景和近景之间的切换动作,进一步判断目标是否坐下,进入下一个工作周期。
[0007] 作为优选,嵌入式主机对于摄像头的分析控制方法如下:控制一,对课堂内所有学生动作进行跟踪和记录,生成可回溯的图像队列;
控制二,对控制一产生的数据进行组装和拆分,将多个有关联的细小目标组装成一个完整的运动目标;同时根据人体外形特征将大目标拆分成多个运动目标,并且抛弃不符合人体外形特征的大目标;
控制三,将控制二中所得到的目标和控制一中记录的该目标的图像队列进行联合特征分析,判断是否在一定时间段时目标没有发生明显的特征变化,消除明显变化的目标,以此来避免干扰;
控制四,跟踪目标尺寸分析出目标到摄像机的距离,根据计算出目标起立时运动的幅度;
控制五,将控制三中所得到的目标和控制一中记录的该目标的图像队列进行联合分析,计算出运行幅度符合控制四中结果的目标,并且标注为起立再进行定;
控制六,锁定起立目标后,发送全景切换命令,同时控制发送近景摄像头转动命令,控制近景摄像头运行;
控制七,根据近景摄像头命令回馈,判断近景摄像头转动到指定位置后,发送近景切换命令;
控制八,如果检测到多个目标起立,发送全景切换命令,切换到全景摄像头;
控制九,控制五中锁定的目标如果出现向下运行,认为目标已经坐下;
控制十,学生坐下后,交出摄像机控制权,切换为其它场景。
[0008] 作为优选,控制一,采用跨差异比较法,跨域4帧对图像差异进行比较,扩大差异阈值;比较方式采用R、G、B差异最大值方式,尽最大可能找出可能发生的变化;采集3*3的矩阵模型对计算的结果进行腐蚀操作,消除孤立的噪点,然后使用5*5的矩阵对结果膨胀操作,放大变化值。
[0009] 作为优选,控制一是将错误数据扔掉到,重新放入队列,生成可回溯2秒的图像队列。
[0010] 作为优选,基于控制一,控制二是将相连接的变化进行合并,形成外接矩形;将所有得到的外接矩形映射到一个二维矩阵,如果二维矩阵已经存在,并且矩形70%区域在二维矩阵对应的值上,则将该矩阵进行唯一性标识号,进一步通过大数据进行拆分操作。
[0011] 作为优选,控制三,对拥有唯一标识的矩形进行人体外形特征判断,采用边缘模型和头肩顶模形,剔除不符合的矩形。
[0012] 作为优选,控制四,根据目标到摄像机的距离,采用二次曲线+修正值的模式计算出运动的上、下、左、左幅度。
[0013] 作为优选,控制五,对控制一中的目标进行多帧判断,如果超过控制四中的运行幅度,则认为是备选起立目标;将备选起立目标采用反向直方图方式进行多帧特征判断,如果出现特征大幅变化,则认为是干扰,否则是真实的起立目标,进行锁定。
[0014] 作为优选,控制九中的运动幅度大于控制四中计算结果的60%,则认为坐下。
[0015] 作为优选,所述的全景摄像头和近景摄像头一起安装在教室黑板上方正中间,调整镜头画面,以能拍报出整个教室为宜;全景摄像头和近景摄像头所拍摄的画面的上边沿不超过后墙高度2.5米。
[0016] 与现有技术相比,本产品同现有技术相比具有以下优点及效果:本产品为全自动自适应分析方法,不安装任何第三方辅助摄设备的技术方案,通过图像内容分析出学生的各种动作,算法可以按照预置的方式进行处理,减少了手工拍摄中存在的各种人为因素,在无人工干预的情况下,辅助摄像机进行跟踪拍摄。附图说明
[0017] 图1是本实施例的程序切换逻辑流程图

具体实施方式

[0018] 以下结合具体实施例来说明本发明,下列实施例仅用于说明本发明的技术方案,并不限定本发明的保护范围。
[0019] 首先对于实施例中的几个画面做一下说明:学生近景:借助近景摄像头近距离拍摄学生画面,学生神态、动作清楚可见。
[0020] 学生全景:借助远景摄像头远距离拍摄整个课堂学生的画面。
[0021] 硬件及安装说明:其系统包括嵌入式主机、显示器、一个全景摄像头和一个近景摄像头,嵌入式主机用于分析判断摄像头传来的数据,并通过显示器显示主画面,两个摄像头分别拍摄课堂内学生全景和近景。一般需要2台摄像机+2根视频线+2根电源线即可,摄像机可以选择任何品牌。
[0022] 全景摄像头和近景摄像头一起安装在教室黑板上方正中间,调整镜头画面,以能拍报出整个教室为宜。全景摄像头和近景摄像头所拍摄的画面的上边沿不超过后墙高度2.5米。
[0023] 本实施例方法的应用基础:a)摄像机当中存在学生全景、学生近景的画面;而从这些画面中已经可以分析出学生的起立,坐下动作了。
[0024] b)现代摄像机1080的分辨率已经非常普及,得到的图像清楚度非常高,足够图像分析算法进行使用。
[0025] c) 算法可以按照预置的方式进行处理,减少了手工拍摄中存在的各种人为因素。
[0026] 实施例:如图1所示,本实施例的一种全景位自适应学生图像分析控制方法,其系统包括嵌入式主机、显示器、一个全景摄像头和一个近景摄像头,嵌入式主机用于分析判断摄像头传来的数据,并通过显示器显示主画面,两个摄像头分别拍摄课堂内学生全景和近景,嵌入式主机对于摄像头传来的图像数据进行实时记录,并进行分析后剔除干扰,若发现目标起立,则控制摄像头完成远景和近景之间的切换动作,进一步判断目标是否坐下,进入下一个工作周期。
[0027] 具体为:嵌入式主机对于摄像头的分析控制方法如下:控制一,对课堂内所有学生动作进行跟踪和记录,生成可回溯的图像队列;
控制二,对控制一产生的数据进行组装和拆分,将多个有关联的细小目标组装成一个完整的运动目标;同时根据人体外形特征将大目标拆分成多个运动目标,并且抛弃不符合人体外形特征的大目标;
控制三,将控制二中所得到的目标和控制一中记录的该目标的图像队列进行联合特征分析,判断是否在一定时间段时目标没有发生明显的特征变化,消除明显变化的目标,以此来避免干扰;
控制四,跟踪目标尺寸分析出目标到摄像机的距离,根据计算出目标起立时运动的幅度;
控制五,将控制三中所得到的目标和控制一中记录的该目标的图像队列进行联合分析,计算出运行幅度符合控制四中结果的目标,并且标注为起立再进行锁定;
控制六,锁定起立目标后,发送全景切换命令,同时控制发送近景摄像头转动命令,控制近景摄像头运行;
控制七,根据近景摄像头命令回馈,判断近景摄像头转动到指定位置后,发送近景切换命令;
控制八,如果检测到多个目标起立,发送全景切换命令,切换到全景摄像头;
控制九,控制五中锁定的目标如果出现向下运行,认为目标已经坐下;
控制十,学生坐下后,交出摄像机控制权,切换为其它场景。
[0028] 本实施例的控制一,采用跨帧差异比较法,跨域4帧对图像差异进行比较,扩大差异阈值;比较方式采用R、G、B差异最大值方式,尽最大可能找出可能发生的变化;采集3*3的矩阵模型对计算的结果进行腐蚀操作,消除孤立的噪点,然后使用5*5的矩阵对结果膨胀操作,放大变化值。
[0029] 本实施例的控制一是将错误数据扔掉到,重新放入队列,生成可回溯2秒的图像队列。
[0030] 本实施例基于控制一,控制二是将相连接的变化进行合并,形成外接矩形;将所有得到的外接矩形映射到一个二维矩阵,如果二维矩阵已经存在,并且矩形70%区域在二维矩阵对应的值上,则将该矩阵进行唯一性标识号,进一步通过大数据进行拆分操作。
[0031] 本实施例的控制三,对拥有唯一标识的矩形进行人体外形特征判断,采用边缘模型和头肩顶模形,剔除不符合的矩形。
[0032] 本实施例的控制四,根据目标到摄像机的距离,采用二次曲线+修正值的模式计算出运动的上、下、左、左幅度。
[0033] 本实施例的控制五,对控制一中的目标进行多帧判断,如果超过控制四中的运行幅度,则认为是备选起立目标;将备选起立目标采用反向直方图方式进行多帧特征判断,如果出现特征大幅变化,则认为是干扰,否则是真实的起立目标,进行锁定。
[0034] 本实施例的控制九中的运动幅度大于控制四中计算结果的60%,则认为坐下。
[0035] 以上公开的仅为本申请的几个具体实施例,但本申请并非局限于此,任何本领域的技术人员能思之的变化,都应落在本申请的保护范围内。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈