首页 / 专利库 / 软件 / 所见即所得 / 一种基于图像识别模块的所见即所得翻译装置

一种基于图像识别所见即所得翻译装置

阅读:1039发布:2020-06-04

专利汇可以提供一种基于图像识别所见即所得翻译装置专利检索,专利查询,专利分析的服务。并且一种基于 图像识别 模 块 的 所见即所得 翻译装置,包括 图像采集 器件和内置有翻译器的机壳,其特征在于,所述图像采集器件包括用于采集静态图形的第一摄像头和用于采集 动态图像 的第二摄像头;所述机壳内设有用于存储静态图像信息的第一静态图像 存储器 和用于存储动态图像信息的第二动态图像存储器,所述第一静态图形存储器和所述第二动态图像存储器共用连接至通信天线的输入端口和连接至文字识别器的输出端口。本实用新型克服了传统翻译器只能翻译静态文字,不能处理动态图像中的文字信息的 缺陷 。,下面是一种基于图像识别所见即所得翻译装置专利的具体信息内容。

1.一种基于图像识别所见即所得翻译装置,包括图像采集器件(1)和内置有文字处理器(40)的机壳(2),其特征在于,
所述图像采集器件(1)包括用于采集静态图形的第一摄像头(101)和用于采集动态图像的第二摄像头(102);
所述机壳(2)内设有用于存储静态图像信息的第一静态图像存储器(202)和用于存储动态图像信息的第二动态图像存储器(203),所述第一静态图形存储器(202)和所述第二动态图像存储器(203)共用连接至通信天线(201)的输入端口和连接至文字识别器(204)的输出端口。
2.如权利要求1所述的翻译装置,其特征在于,位于所述机壳(2)内的集成电路板(20)上集成有通信天线(201)和文字处理器(40),其中,所述文字处理器(40)连接至所述通信天线(201),其中,所述集成电路板(20)上还集成有用于提取静态图像信息中文字或符号的文字识别器(204),所述文字识别器(204)连接至所述输出端口、所述通信天线(201)和所述文字处理器(40)。
3.如权利要求1所述的翻译装置,其特征在于,所述文字处理器(40)包括第一翻译器(401)、第二翻译器(402)、第三翻译器(403)和第四翻译器(404),所述第一翻译器(401)、所述第二翻译器(402)、所述第三翻译器(403)和所述第四翻译器(404)共用一个输入端口和一个输出端口。
4.如权利要求1至3任一权项所述的翻译装置,其特征在于,所述机壳(2)还包括语音转换器(205),所述语音转换器(205)连接至所述文字处理器(40)和所述通信天线(201)。
5.如权利要求4所述的翻译装置,其特征在于,所述翻译装置还包括显示器件(3),所述图像采集器件(1)连接至所述集成电路板(20)的输入端,所述显示器件(3)连接至所述集成电路板(20)的输出端。
6.如权利要求4所述的翻译装置,其特征在于,所述集成电路板(20)通过电池(4)供电,所述电池(4)的正极连接至所述集成电路板(20)的输入端,电池(4)的负极连接至所述集成电路板(20)的输出端。
7.如权利要求6所述的翻译装置,其特征在于,所述机壳(2)还包括安装在其上的充电接口(206),所述充电接口(206)连接至所述电池(4)。
8.如权利要求7所述的翻译装置,其特征在于,所述第一静态图形存储器(202)和所述第二动态图像存储器(203)通过芯片插槽安装在机壳(2)中。
9.如权利要求8所述的翻译装置,其特征在于,所述图像采集器件(1)是智能手机、单反相机、笔记本电脑平板电脑中的一种或多种。
10.如权利要求9所述的翻译装置,其特征在于,所述第二动态图像存储器(203)连接有用以发出动态图像采集时钟的定时器(207)。

说明书全文

一种基于图像识别所见即所得翻译装置

技术领域

[0001] 本实用新型属于电子产品技术领域,尤其涉及一种基于图像识别模块的所见即所得翻译装置。

背景技术

[0002] 地球是一个多语种的大环境,随着生活平的提高或互联网技术的发展,不同国家之间的地域界限越来越模糊,人们可以接受到不同于其自身国家的文化信息,同时也面临着无法理解该信息的问题。例如,阅读外文文献、观看影视作品、异国旅游时,当事者会碰到无法认识的文字或者符号信息。因此,基于光学字符识别技术的翻译装置可以实时的对拍摄图像中的文字或者符号信息进行实时翻译,极大程度上的方便了人们的生活。
[0003] 现有的翻译装置结构和功能相对简单,仅能实现对静态图像信息中的文字或符号进行翻译,无法处理动态图像信息中的文字或符号。实用新型内容
[0004] 针对现有技术之不足,本实用新型提供一种基于图像识别模块的所见即所得翻译装置,包括图像采集器件和内置有翻译器的机壳。所述图像采集器件包括用于采集静态图形的第一摄像头和用于采集动态图像的第二摄像头。
[0005] 所述机壳内设有用于存储静态图像信息的第一静态图像存储器和用于存储动态图像信息的第二动态图像存储器,所述第一静态图形存储器和所述第二动态图像存储器共用经通信天线与所述翻译器直接或间接连接的输入端口和输出端口。根据本实用新型的该技术方案,使得在不改变传统翻译器的前提下,不仅能够处理(翻译)静态图像中的文字,也能处理(翻译)动态图像中的文字,例如在观影时或在旅游途中。
[0006] 根据一种优选实施方式,位于所述机壳内的集成电路板上集成有通信天线和翻译器,其中,所述翻译器连接至所述通信天线。其中,所述集成电路板上还集成有用于提取静态图像信息中文字或符号的文字识别器,所述文字识别器连接至所述输出端口、所述通信天线和所述翻译器。
[0007] 根据一种优选实施方式,所述文字处理器包括第一翻译器、第二翻译器、第三翻译器和第四翻译器,所述第一翻译器、所述第二翻译器、所述第三翻译器和所述第四翻译器共用一个输入端口和一个输出端口。
[0008] 根据一种优选实施方式,所述机壳还包括语音转换器,所述语音转换器连接至所述翻译器和所述通信天线。
[0009] 根据一种优选实施方式,所述翻译装置还包括显示器件,所述图像采集器件连接至所述集成电路板的输入端,所述显示器件连接至所述集成电路板的输出端。
[0010] 根据一种优选实施方式,所述集成电路板通过电池供电,所述电池的正极连接至所述集成电路板的输入端,电池的负极连接至所述集成电路板的输出端。
[0011] 根据一种优选实施方式,所述机壳还包括安装在其上的充电接口,所述充电接口连接至所述电池。
[0012] 根据一种优选实施方式,所述第一静态图形存储器和所述第二动态图像存储器通过芯片插槽安装在机壳中。
[0013] 根据一种优选实施方式,所述图像采集器件是智能手机、单反相机、笔记本电脑平板电脑中的一种或多种。
[0014] 根据一种优选实施方式,所述第二动态图像存储器连接有用以发出动态图像采集时钟的定时器,用以按帧存储动态图像信息。
[0015] 本实用新型的有益技术效果:
[0016] 1、动态图像信息按帧存储于存储器中后,再通过文字识别器的提取识别,从而实现了对动态图像信息中文字或符号信息的翻译。
[0017] 2、集成了多种翻译引擎,能够输出多种翻译结果供用户判断使用。附图说明
[0018] 图1是本实用新型翻译装置的一个优选方式的装置简化示意图;
[0019] 图2是本实用新型翻译装置的一个优选方式的装置示意图;和
[0020] 图3是本实用新型翻译装置的优选的文字处理器的结构示意图。
[0021] 附图标记说明
[0022] 1:图像采集器件    2:机壳          3:显示器件
[0023] 4:电池            20:集成电路板   40:文字处理器
[0024] 101:第一摄像头    102:第二摄像头  201:通信天线
[0025] 202:第一静态图形存储器            203:第二动态图像存储器[0026] 204:文字识别器    205:语音转换器  206:充电接口
[0027] 207:定时器        401:第一翻译器  402:第二翻译器
[0028] 403:第三翻译器    404:第四翻译器

具体实施方式

[0029] 下面结合附图进行详细说明。
[0030] 如图1所示,一种基于图像识别模块的所见即所得翻译装置,包括图像采集器件1和内置有文字处理器40的机壳2。
[0031] 图像采集器件1包括基于双摄像头组件的第一摄像头101和第二摄像头102,其中,第一摄像头101用于采集静态图形,第二摄像头102用于采集动态图像。第一摄像头101和第二摄像头102经共用输出端口连接至机壳2。
[0032] 机壳2内设有用于存储静态图像信息的第一静态图像存储器202和用于存储动态图像信息的第二动态图像存储器203。第一静态图形存储器202和所述第二动态图像存储器203共用经通信天线201与文字处理器40直接或间接连接的输入端口和输出端口。
[0033] 经第一摄像头101采集的静态图形通过共用输出端口经安装在机壳2上的通信天线201传输至第一静态图形存储器202。或经第二摄像头102采集的动态图像通过共用输出端口经安装在机壳2上的通信天线201传输至第二动态图像存储器203。
[0034] 机壳2中内置有集成电路板20,集成电路板20上集成有通信天线201和文字处理器40。其中,文字处理器40连接至通信天线201。其中,集成电路板20上还集成有用于提取静态图像信息中文字或符号的文字识别器204,文字识别器204连接至所述输出端口、通信天线
201和文字处理器40。文字处理器40用于对图像信息中的文字或符号信息进行翻译,将其转化至所需的语言类型。文字处理器40可以是具有数据处理功能的独立硬件或由翻译芯片集成的集成硬件,如国产的寒武纪神经网络处理器或者Sensory公司出品的“NLP-5x Natural Language Processor”。在实际集成中,NLP-5x芯片可以与Myrid的VPU芯片联合使用,实现对声音文本的高速处理。
[0035] 优选地,文字处理器40是NLP处理器。如图3所示,NLP处理器具有输入端和输出端,其中,输入端与文字识别器204相连接,用于接收文字识别器204提取识别的文字或符号信息。输出端与通信天线201相连接,文字处理结果经输出端和通信天线201传输至显示器件进行显示。从而实现了对文本信息的处理。
[0036] 文字识别器204采用成熟的OCR/ICR等识别方法来识别静态图像信息中的文字或符号信息。文字识别器204对存储在第一静态图形存储器202中的静态图形信息中的文字或符号信息进行识别提取,或对存储在第二动态图像存储器203中的经转化的单帧的静态图形信息中的文字或符号信息进行识别提取,经识别提取后的文字或符号信息以可编辑的文本信息状态传输至文字处理器40中进行翻译,得到所需的翻译结果。文字识别器204可以是SMT32型图像识别芯片、图像识别摄像头、CMUCAM3型图像识别传感器、图像识别工业相机、OCR高拍仪、或具有数据处理功能的独立硬件或集成硬件。尤其是,借助于部署有Udpipe(https://github.com/bnosac/udpipe)的安卓嵌入件来实现拆分词组(Tokenization),以动词为根节点的解析树(Lemmatization)以及关联性分组(Dependency Parsing)。由此可以单纯借助于硬件完成文字识别与翻译。
[0037] 显示器件3连接至所述集成电路板20的输出端,用于接收翻译完成的翻译结果。具体地,经翻译完成的翻译结果通过通信天线201传输至显示器件3中进行输出显示。
[0038] 机壳2中还内置有电池4,电池4的正极连接至集成电路板20的输入端,电池4的负极连接至所述集成电路板20的输出端。集成电路板20通过电池4供电后进行工作。
[0039] 优选地,如图2所示,文字处理器40包括第一翻译器401、第二翻译器402、第三翻译器403和第四翻译器404。其中,第一翻译器401、所述第二翻译器402、所述第三翻译器403和所述第四翻译器404共用一个输入端口和一个输出端口。第一翻译器401、第二翻译器402、第三翻译器403和第四翻译器404彼此均基于不同的翻译引擎,例如是基于规则的翻译引擎、基于统计的翻译引擎、基于实例的翻译引擎或基于混合的翻译引擎。通过多个不同的翻译引擎可以输出多种不同的翻译结果,避免了单一引擎翻译不同类型例如是口语化的日常交际用语、科技文献、政府文件等信息时导致的翻译结果不准确的缺陷。输出的多种翻译结果供使用者综合理解,可以达到即使在翻译不准确的情况下,使用者也能最大程度的理解所需翻译的信息的目的。翻译器可以是JM20330APB5-TGCA型翻译芯片、微软研发的HoloLens芯片、全球译同声翻译机、智能语音翻译机、汉维翻译机或具有数据处理功能的独立硬件或集成硬件。
[0040] 此外,基于Android的嵌入式翻译设备正在进入快速发展阶段,例如Apache的Open NLP或谷歌开发的Cloud Natural Language API。在本实用新型中,可以将OpenNLP或其他NLP API封装至硬件设备进而作为独立的翻译器并直接连接至本实用新型的文字处理器,甚至将其与本实用新型的文字处理器进行集成。以上这些硬件解决方案都是现有技术,而不是本实用新型所求解决的问题。
[0041] 优选地,如图2所示,集成电路板20中还集成有语音转换器205。语音转换器205连接至文字处理器40和通信天线201。语音转换器205可以将翻译结果转换成语音信息,经通信天线201传输至显示器件3后,通过语音播放的方式进行输出。语音转换器205可以是RTS0072DIP16型语音转换IC、UV1000型过程信号至语音转换器、爱普生S1V30120文字语音转换芯片、听见录音笔或具有数据处理功能的独立硬件或集成硬件。
[0042] 优选地,如图2所示,第二动态图像存储器203连接有用以发出动态图像帧采集时钟的定时器207,用以按帧存储动态图像信息。
[0043] 优选地,如图2所示,机壳2上还设置有充电接口206,充电接口206通过接口电连接至电池4,用于对电池4进行充电。
[0044] 优选地,第一静态图形存储器202和第二动态图像存储器203通过芯片插槽安装在机壳2中。可以进行拆取,方便更换。第一静态图形存储器202和第二动态图像存储器203可以是例如是SD卡、硬盘、存储芯片等的存储介质。
[0045] 优选地,图像采集器件1可以是智能手机、单反相机、笔记本电脑和平板电脑中的一种或多种。
[0046] 优选地,如图2所示,第二动态图像存储器203连接有用以发出动态图像帧采集时钟的定时器,用以按帧存储动态图像信息。
[0047] 优选地,显示器件3可以是智能手表、智能眼镜、VR设备等便携式可穿戴智能设备。
[0048] 为了便于理解,详细说明翻译装置对动态图像信息进行翻译的流程。
[0049] 经第二摄像头采集的动态图像信息经安装在机壳2上的通信天线201传输至第二动态图像存储器203中。第二动态图像存储器203将接收到的动态图像信息按帧进行存储,即动态图像信息在第二动态图像存储器203中是按单帧的静态图像进行存储的。当文字识别器204检测到第二动态存储器203中存在单帧的图像信息后,其按照其存储的时间先后顺序对其中的单帧的静态信息进行识别,提取其中的文字或符号信息。提取完成的文字符号信息以可编辑的文本形式随对应的单帧静态图像信息一同传输至文字处理器40中。文字处理器40接收到可编辑的文本信息后将其中的内容翻译成指定的语言。翻译结果随对应的单帧图像信息一同经通信单元201传输至显示器件进行输出显示。
[0050] 需要注意的是,上述具体实施例是示例性的,本领域技术人员可以在本实用新型公开内容的启发下想出各种解决方案,而这些解决方案也都属于本实用新型的公开范围并落入本发明的保护范围之内。本领域技术人员应该明白,本实用新型说明书及其附图均为说明性而并非构成对权利要求的限制。本实用新型的保护范围由权利要求及其等同物限定。
高效检索全球专利

专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台,是提供专利分析,专利查询,专利检索等数据服务功能的知识产权数据服务商。

我们的产品包含105个国家的1.26亿组数据,免费查、免费专利分析。

申请试用

分析报告

专利汇分析报告产品可以对行业情报数据进行梳理分析,涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度,系统通过AI智能系统对图表进行解读,只需1分钟,一键生成行业专利分析报告。

申请试用

QQ群二维码
意见反馈