【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、手書き文字を構成するストロークの入力中にリアルタイムにて文字認識を行うオンライン手書き文字認識装置に関する。

【０００２】

【従来の技術】従来、コンピュータ等に文字データを入力する場合は、主としてキーボードが用いられてきた。
しかしながら、キーボードを使用するためには、使用者にある程度の習得や慣れを強いることとなり、それ故、
より簡便な入力装置の実現が望まれていた。

【０００３】近時のコンピュータの高性能化、高速化は、上記した要望に応え、キーボードに変わるより簡便な入力装置としてリアルタイムにて手書き文字を認識して、文字データに変換するオンライン手書き文字認識装置を実現することを可能とした。

【０００４】実現されているオンライン手書き文字認識装置は、基本的には、文字を構成する座標列を入力するためのタブレットと、タブレットに重ねられ入力された文字をそのまま表示するための表示手段と、ＣＰＵとプログラムにて実現され入力された手書き文字を認識して文字データに変換する文字認識部とで構成されている。

【０００５】ペンを用いてタブレット上に書かれたストロークはそのまま、タブレットに重ねられた表示手段に筆跡として表示されるとともに、文字認識部に送られ、
文字を表すデータに変換される。

【０００６】オンライン手書き文字認識装置では、複数の文字が連続して入力されたとき、認識のため入力された複数の文字から１文字づつ切り出す必要がある。

【０００７】従来、認識装置にて１文字の切り出しの処理を不要とするために入力枠が設定され、利用者はその中へ文字を１文字づつ書くことが要求されていた。

【０００８】利用者のより自由な文字入力を可能とするため入力枠なしでの入力も実現されているが、この場合は、認識装置は１文字の切り出しを入力座標およびペンが離れている時間から判断していた。

【０００９】また、入力された後に文字認識された結果を表示しその結果が誤っている場合は、候補を表示し、
候補から選び直すか、それでも誤っている場合は、文字を書き直すようになっていた。

【００１０】

【発明が解決しようとする課題】入力枠があると利用者に筆記時の制約を与えることとなり大きな負担となる。

【００１１】また枠なしでの入力では、特に漢字が入力される場合、偏と旁なのか互いに独立な文字なのかが判然としない入力をされた場合は、入力座標およびペンが離れている時間だけで入力された文字が、一文字なのか、複数の文字なのかを判断することは困難であり、文字切り出し部分で誤ることがある。 例えば、図４に「動く」という手書き入力を行った場合を示す。 この例では偏と旁が幾分離れており、「動く」と入力されたのか「重力く」と入力されたのかが判然とせず、従来の方法では正しく認識することができなかった。 このような誤認識は漢字だけでなく、ひらがな、カタカナでも起こり得る。

【００１２】また誤認識の修正に関しても、候補からの選択や入力のやり直しは、使用者にとって煩雑な操作であり、より簡単な修正が望まれている。

【００１３】本発明は、誤認識の少ない文字認識を可能とし、かつ認識誤りがあった場合でも、誤りを簡単な指示により修正できるオンライン手書き文字認識装置を提供することを目的とする。

【００１４】

【課題を解決するための手段】本発明のオンライン手書き文字認識装置は、タブレットより送られてきたペンの位置情報によって文字を照合するオンライン手書き文字認識装置であって、ペンがタブレットから離れているときに移動する距離とペンがタブレットから離れている時間とに基づいて１文字を切り出す手段と、文字を切り出した後に認識を行ないその結果と入力されたデータとを対応付けて表示する手段と、切り出し間違いがあった場合に指定された範囲のペンの位置情報によって再度認識を行い、修正を行なう手段を具備することを特徴とする。

【００１５】

【作用】本発明のオンライン手書き文字認識装置は、ペンがタブレットから離れているときに移動する距離と、
ペンがタブレットから離れている時間とに基づいて、１
文字を切り出す。 文字を切り出した後に認識を行ない、
その結果と入力されたデータとを対応付けて表示する。
切り出し間違いがあった場合には、ペンにより指示することにより再度認識を行い、修正を行なう。

【００１６】

【実施例】以下、本発明の一実施例を図面を参照して説明する。

【００１７】図１は本実施例による基本構成図を示している。 図１のオンライン手書き文字認識装置は、文字を入力するタブレット１、タブレット１から送られてくるデータより１文字を切り出す文字切り出し部２、入力データを格納しておくデータバッファ３、入力データと文字認識結果の対応表示を行う表示部４、入力データに対して文字認識を行う文字認識部５、利用者からの誤認識を指示するジェスチャを解析するジェスチャ認識部６、
および、利用者の指示を解析する指示解析部７から構成されている。 文字切り出し部２、文字認識部５、ジェスチャ認識部６、および、指示解析部７は図示していないＣＰＵにより実現されている。

【００１８】文字切り出し部２により、タブレット１より送られてきたデータの１文字が切り出され文字認識部５へと送られる。 このとき同時にデータバッファ３にストローク毎のデータとして蓄えられる。

【００１９】一方、文字切り出し部では図２に示すフローチャートに従って文字の切り出しが行われる。 文字の切り出しは、ペンがタブレットから離れているときに移動する距離とペンがタブレットから離れている時間とに基づき行われる。 例えば、図３のような「コンピュータ」という入力を行った場合、”コ”の終点である点Ａ
から”ン”の書き出しの点である点Ｂへペンが移動する際には、ある時間だけペンがタブレットより離れており、また文字から文字へペンが移動する場合にはある程度の空白が存在する。 このことを利用して、本実施例では文字の切り出しを行っている。

【００２０】以下、図２に示す文字の切り出し処理のフローチャートを詳細に説明する。 尚、本実施例においては文字は右から左に書かれるものとする。

【００２１】１文字めの文字内でのストローク間のペンの移動時間の値を初期値としてｔｍａｘに入力しておく。

【００２２】ステップＳ２１において、ストロークデータが入力される。

【００２３】ステップＳ２２、Ｓ２３において、ｉ−１
番目ストロークの終点からｉ番目の始点までのペンが移動する際にかかった時間をＴi とし、その横方向の距離をＳi とする。 右方向の移動を正の値、左方向の移動を負の値とする。

【００２４】ステップＳ２４において、ストローク間移動距離Ｓi が負の値である時は、ｉ番目と（ｉ＋１）番目のストロークは同一の文字のストロークであるので、
Ｓ２１に戻る。 ストローク間移動距離Ｓｉが負の値でないときは、ステップＳ２５に進む。

【００２５】ステップＳ２５では、ストローク間移動距離Ｓi が、例えば現在ｎ番目の文字の切り出しを行なっている場合に、ｎ−１番目の文字の全ストロークの幅の２倍よりも大きい時のように、正の値であり十分大きいものであると、ｉ番目と（ｉ＋１）番目のストロークは別の文字のストロークであると判断してステップＳ２７
に進む。 ストローク間移動距離Ｓi が、正の値であるが十分大きくないとき、ステップＳ２６に進む。

【００２６】ステップＳ２６では、ｎ番目の文字の切り出しを行なっている場合にｎ−１番目までの文字のストローク間の移動時間の最大値ｔｍａｘを参考にし、０．
５秒程度のマージンｄをとり、ストローク間移動時間Ｔ
i がｔｍａｘ＋ｄよりも大きい場合はｉ番目とｉ＋１番目のストロークは別の文字ストロークであると判断し、
ステップ２７に進む。 大きくない場合はステップＳ２１
に戻る。

【００２７】ステップＳ２７では、次の文字の切りだし用に今切り出された文字のストローク間のペンの移動時間によってｔｍａｘを変更しておく。

【００２８】ステップＳ２８において、１文字を出力する。 １文字の文字切り出しの処理が終了し、ステップＳ
２１に戻る。

【００２９】すべての文字のデータが入力されると、文字認識部５の結果が表示部４へ送られ画面へ結果が表示される。

【００３０】表示部４では入力データ（手書き文字そのもの）と認識結果とを対応づけて表示する。 図５にその表示例を示す。 本例では手書き入力「しました」に対し、「しま」、「し」、「た」をそれぞれ一文字と判断して切り出し、認識結果として「ほ」、「し」、「た」
との結果を表示している。 認識結果は、一文字として切り出されたストロークまたはストローク群の下に表示される。

【００３１】認識結果に誤りがあった場合、特に一文字の切り出しに誤りがあった場合は、利用者はタブレット１を介し所定のジェスチャ入力を行うことにより文字の切り出し位置の修正を行い、正しい認識結果を得ることができる。

【００３２】利用者から誤認識を指示するジェスチャが入力されると、タブレット１よりジェスチャ認識部６へデータが送られて、ジェスチャ認識部６では入力されたジェスチャを認識し、その意味するところを、指示解析部７に受け渡す。 指示解析部７では、ジェスチャ認識部６の認識結果を入力されているストローク群との関連において解析し、一文字の切り出しをやり直す。

【００３３】修正のフローチャートを図８に示す。

【００３４】まず、ステップＳ８１において、ジェスチャ入力の指示位置の抽出を行う。 抽出された位置から修正の対象となる文字または文字列が特定される。

【００３５】次に、ステップＳ８２において、特定された文字において、ジェスチャの意味するところ及びその位置から新たに１文字とすべきストローク群が特定され、それらが１文字として切り出される。

【００３６】ここまでが、指示解析部７にて行われる。

【００３７】次に、制御を文字認識部５に移し、まず、
ステップＳ８３において、切り出し結果に基づきデータバッファ３から該当画のデータを取り出し認識する。

【００３８】その後、ステップＳ８４にて新たな認識結果を前の認識結果と入れ換える。

【００３９】ステップＳ８５において、残りのストロークが残っているか判定する。 残っている場合には、ステップＳ８２に進む。 残っていない場合には、ステップＳ
８６に進む。

【００４０】ステップＳ８６では、再表示を行う。

【００４１】ここで、図５のような過剰に結合した誤りを起こしていた場合は、図６に示すような”し”と”
ま”を分離するジェスチャをすることによりジェスチャ認識部で、分離されるものだと判断し、ジェスチャの位置とジェスチャ認識部の結果により指示解析部で、１画目と、２画目から４画目までとそれぞれ独立した１文字であると判断し、図８に示すフローチャートのような処理を行なう。

【００４２】まず、指示位置の抽出により、１文字目が分離し、１画目が１文字であると判断され、１文字として切り出される。 それを１文字として認識部でデータバッファから該当画のデータを取り出し認識され、前の認識結果と入れ換えられる。 そして、２画目から４画目のデータが認識されずに残っているために、また１文字の切り出しから同様の処理を行い、全てのデータが認識され直されたら、再表示を行うことになる。

【００４３】また、図７に示すように入力データ”い”
が認識結果”１１”として認識され、過剰分離の誤りを起こしていた場合には、図に示す”１”と”１”を結ぶ統合ジェスチャにより、ジェスチャ認識部で統合させるものだと判断し、ジェスチャの位置と認識結果より、１
文字目と２文字目が統合され、１画目と２画目が１文字であると判断し、過剰統合の時と同じく図８に示す処理を行なう。 まず、１画目と２画目が１文字として切り出され、認識部で該当画のデータをデーアバッファ３から取り出し認識され、前の認識結果と入れ換えられる。 そこで、残りのデータがないためそのまま再表示を行なう。

【００４４】

【発明の効果】以上説明したように本発明のオンライン手書き文字認識装置は、ペンがタブレットから離れているときに移動する距離と、ペンがタブレットから離れている時間とに基づいて１文字を切り出す手段と、文字を切り出した後に認識を行ないその結果と入力されたデータとを対応付けて表示する手段と、切り出し間違いがあった場合に指定された範囲のペンの位置情報によって再度認識を行い、修正を行なう手段を具備しているので、
誤認識の少ない文字認識を可能とし、かつ認識誤りがあった場合でも、誤りを簡単な指示により修正できる。

【図面の簡単な説明】

【図１】本発明の一実施例によるブロック図である。

【図２】文字切り出しのフローチャートである。 。

【図３】文字切り出しの例である。

【図４】切り出し誤りの例である。

【図５】認識結果の表示の例である。

【図６】切り出しの過剰統合の例である。 。

【図７】切り出しの過剰分離の例である。

【図８】修正のフローチャートである。

【符号の説明】

１ タブレット ２ 文字切りだし部 ３ データバッファ ４ 表示部 ５ 文字認識部 ６ ジェスチャ認識部 ７ 指示解析部