CN1284398C - 移动装置与传送系统 - Google Patents

移动装置与传送系统 Download PDF

Info

Publication number
CN1284398C
CN1284398C CNB021303312A CN02130331A CN1284398C CN 1284398 C CN1284398 C CN 1284398C CN B021303312 A CNB021303312 A CN B021303312A CN 02130331 A CN02130331 A CN 02130331A CN 1284398 C CN1284398 C CN 1284398C
Authority
CN
China
Prior art keywords
mobile device
character
image
character row
result
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
CNB021303312A
Other languages
English (en)
Other versions
CN1407826A (zh
Inventor
影广达彦
关峰伸
酒匂裕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maxell Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Publication of CN1407826A publication Critical patent/CN1407826A/zh
Application granted granted Critical
Publication of CN1284398C publication Critical patent/CN1284398C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition

Abstract

本发明涉及一种移动装置,其带有内置的图象俘获装置,及字符识别功能,以便呈现随字符识别结果收集的信息。使用该移动装置,需要时可显示字符行抽取进程,并可提高被输入供识别处理的图象的分辨率。据此,操作者能够易于选择目标字符行。此外,该移动装置的字符识别率通过分辨率的提高而被改进。

Description

移动装置与传送系统
技术领域
诸如移动电话等带有内置图象俘获装置的移动装置由于CPU性能的增加及CCD等的价格降低而广泛普及。通过俘获包含由用户提示的字符串的图象,并使用带有内置图象俘获装置的移动装置识别字符串,已能够从网络抽取与字符串相关的信息。为了从图象选择目标字符串,需要一种使用移动装置上可被直观操作的简单的用户界面的指令方法。
在分辨率与识别率之间总是有一种折衷。当需要高识别率时,需要对输入图象进行处理。就结构来说,移动装置俘获高分辨率图象是困难的。因此,使用由移动装置的照相机俘获的低分辨率图象进行字符识别。
背景技术
使用来自图象的字符识别结果的信息检索技术在JP-A-331006/2000及JP-A-254622/1998中有述。另外,JP-A-23012/2000描述了使用移动装置的一种翻译器。该发明中,在图象显示器上显示用于向图形用户界面(GUI)施加目标字符行的行部分。然而,线段在长度和位置上是固定的,并只用作为操作者俘获图形的索引,于是需要操作者调节字符行的位置和大小。该先有技术文献没有公开任何用于通过移动装置中低分辨率图象俘获装置俘获图象的字符识别。
JP-A-23012/2000描述了一种装置,该装置在移动电话或移动装置中包含了一种的CCD相机,以便俘获图象而进行字符识别,并具有在语言之间进行翻译的翻译功能,以及基于检索的结果进行检索的检索功能。然而,它没有对操作者提供任何易于从图象选择目标字符行的装置。反之,根据本发明,任何需要时,从输入图象抽取字符行的结果就能呈现给操作者。这使得能够易于确认目标字符行。
此外,在平衡成本和尺寸时,包含在移动装置等中的图象俘获装置很难设计成能够俘获高分辨率图象。如果对低分辨率图象进行识别处理,识别率受到负面的影响,这可能会限制操作者的意图。这种情形下,根据本发明,从俘获的低分辨率图象进行字符行的抽取处理,并然后字符行的图象受到扩展处理。其结果是提高了字符行图象的分辨率,改进了识别率。
发明内容
本发明的目的是要提供一种移动装置,该装置具有用于在俘获的图象中抽取字符图象嵌入区域的一种装置,其中在俘获的图象变化时字符行嵌入区域被连续抽取,且抽取的字符行嵌入区域随之显示在显示装置上,直到使输入达到确认装置。本发明还具有用于确认字符行确认区域要被处理以供识别的装置,用于通过网络传送识别结果的装置,以及用于通过网络基于识别的结果接收反馈的装置。
本发明的另一目的是要提供进而具有俘获图象分辨率提高装置的移动装置,其中被确认的字符行确认区域受到象素补充,平滑,及二值化。
本发明的另一目的是要提供一种具有移动装置及通过网络连接到该移动装置的传送系统,其中移动装置具有用于通过网络向计算机传送移动装置上获得识别结果或字符行抽取区域的装置,且计算机具有基于传送的识别结果或字符行抽取区域通过网络进行信息搜索,并用于向移动装置传送搜索结果的装置。
本发明提供了一种移动装置,包括:用于连续多次获取图像的装置;用于显示所述获取的图像以及记号的装置;用于从所述获取的图像中抽取最接近所述记号而表示的字符行记载区域的装置;用于确定由所述抽取装置抽取的字符行记载区域的装置,其中,所述抽取装置根据所述获取的图像的更新多次抽取所述字符行记载区域并且在所述显示装置上显示根据该抽取结果被更新的字符行记载区域,直到所述确定装置出现输入为止。
本发明提供了一种字符行记载区域的抽取方法,所述字符行记载区域的抽取方法用于在移动装置中从输入的图像数据中抽取字符行记载区域,包括以下步骤:连续多次获取图像的第1步骤;在该移动装置所具有的显示装置上显示所获取的图像以及记号的第2步骤;从所述获取的图像中抽取最接近所述记号而表示的字符行记载区域的第3步骤,其中,所述第3步骤根据所述获取的图像的更新多次抽取所述字符行记载区域,并且在所述显示装置上显示根据该抽取结果被更新的字符行记载区域。
本发明提供了一种信息检索方法,用于检索由移动装置通过网络获得的信息,其中包括:由移动装置的图像获取装置获取图像的第1步骤;确定所述获取的图像中的字符行记载区域的第2步骤;识别所述确定的图像中的字符行记载区域所记载的字符行的第3步骤:判别所述识别结果是表示地址信息的字符串还是其它的字符串的第4步骤;当所述判别结果为其它字符串时,便以该字符串为基础检索所述网络内的信息,并用所述移动装置接收该检索结果的第5步骤。
本发明提供了一种通信系统,该通信系统由移动装置和通过网络与所述移动装置连接的计算机构成,所述移动装置包括:图像获取装置和该获取的图像的显示装置;确定所述获取的图像中的字符行记载区域的装置;在所述被确定的区域中进行字符行识别的装置;及通过所述网络将所述识别结果传送至所述计算机的装置,所述计算机包括:判别所获取的识别结果是表示地址信息的字符串还是其它的字符串的装置;当所述判别结果为其它字符串时,便以该字符串为基础启动检索程序检索所述网络内的信息,并将检索结果发送到所述移动装置的装置。
本发明提供了一种服务器装置,该服务器装置可以通过网络与移动装置进行通信,其中包括:根据由所述移动装置的图像获取装置所获取的图像接收字符识别结果的装置,和接收包括由所述移动装置的图像获取装置所获取的图像中的字符行的部分图像,并根据接收图像进行字符识别的装置的至少一个装置;判别该识别结果是表示地址信息的字符串还是其它的字符串的装置;及当所述判别结果为其它字符串时,便以该字符串为基础启动检索程序检索所述网络内的信息,并将检索结果发送到所述移动装置的装置。
附图说明
从以下参照附图所考虑的详细说明本发明以上和附加的特性及特征将更为明显,附图中相同的标号指示相同的元件,且其中:
图1是使用带有识别功能的移动装置的信息收集的图示;
图2是表示根据本发明移动装置的显示内容的图示;
图3是表示根据本发明移动装置的其它显示内容的图示;
图4是表示本发明的移动装置硬件配置的图示;
图5是一流程图,表示本发明网络上的移动装置和计算机内处理流程;
图6是字符行抽取的概念图示;
图7是字符行抽取的流程图;
图8是高分辨率图象生成的概念图示;
图9是高分辨率图象生成的流程图;
图10是字符行识别的概念图示;
图11是字符行识别的流程图;
图12表示显示两个或多个字符序列识别结果的一例。
具体实施方式
参照附图对本发明详细说明如下。
图1示出本发明中使用的一种移动装置,且带有字符行的对象图象用作为输入数据。标号101标记移动装置的一例。标号102标记移动装置101上的内容显示器。但是,相机在显示器相对一侧用作为图象俘获装置。标号103标记控制杆,且104标记按钮。内容显示器是触摸板,通过该触摸板操作者能够直接提供指令。使用这种移动装置,如标号105标记的对象上的URL地址和字符行图象被俘获。然后进行字符行嵌入区域的抽取和字符行的识别。然后通过如标号106所标记的无线通信传输数据。使用连接到如标号107所标记的网络的计算机,可在网络上搜索、传输并显示与识别的内容相关的信息。操作者看见显示的内容,并再次提供指令。这样,相关的信息被检索。
图2和3表示本发明的内容的显示的例子。
图2示出一例,其中已经对嵌入在俘获的对象图象中的URL字符行进行了字符识别处理,并基于识别的结果已经检索出对应于该URL的主页。首先,由图象俘获装置俘获的对象显示在由标号201标记的内容显示器上。如202标记的一个记号显示在内容显示器中。该记号可由操作者移动。在位于靠近该记号处对URL字符行上进行字符行矩形抽取处理。每当需要时,由203标记的从抽取所得的矩形条(虚线内)被重新加载,且重新加载的矩形条被重复显示。其结果是,操作者通过操作该装置或移动记号,能够易于选择识别的目标字符行。当所得的矩形轮廓正确地包围了目标字符行时,用户输入确认指令以进行对于矩形条内字符行的字符的识别。此后,识别的结果显示在如204所标记的弹出式窗口中。如果识别的结果正确,操作者输入确认指令。结果是,如205所标记的图示所示,对应于识别结果的在URL处可得的内容从计算机在网络上传输到移动装置。此后,操作者看见显示器上的内容,并选择由206所标记的显示器上的图标。这样,检索到相关的信息。
图3示出一例,其中已经对俘获的对象上的字符行进行了字符识别处理,并已经基于识别的结果搜索了网络上的内容,以便被显示在移动装置上。与图2同样的方式,俘获的内容显示在由301标记的显示器上。这时,最接近由302标记的记号的字符行被抽取。对于来自由303标记的相继显示的字符行矩形条的字符行矩形条,用户输入一确认指令。在识别处理之后,识别结果显示在由304标记的弹出式窗口中。当识别结果正确时,操作者输入一确认指令。之后,识别结果被输入到与网络连接的搜索引擎。然后,移动装置接收获得的搜索结果,并由305标记的图示所示那样显示该结果。然后,操作者看见显示的搜索结果,并在显示器上选择图标以接收其它内容。
图4示出移动装置的硬件配置。该移动装置包括用于执行控制、图象处理及字符识别的CPU 401,存储器402,显示器403,用于俘获输入数据的图象俘获装置404,用于无线通信的天线405,扬声器406,话筒407,电池408,按钮409,及内装在其中覆盖在通过总线连接的显示器上的触摸板410。
图5示出本发明的总体处理流程。首先,在移动装置中,在步骤501使用图象俘获装置由CCD俘获目标对象的图象。在步骤501被俘获的图象显示在显示器中。然后,如图2和3所示,在步骤502使用最靠近记号字符作为核心进行字符行抽取处理。在步骤503这样获得的抽取的结果以重叠的方式显示在显示器中的内容上的矩形条中。这样,进程返回图象俘获步骤501并之后被重复,直到在步骤504操作者输入确认指令。
在操作者输入确认指令之后,使用显示的矩形条内的本地图象进行图象处理,并对于识别处理输入被处理的数据。通过步骤505对从图象俘获装置俘获的低分辨率输入图象进行分辨率提高处理。在步骤519输入提高了分辨率的本地图象用于字符行识别。然后,在步骤506向操作者呈现字符识别结果,并请求指令。当操作者判断出结果正确时,操作者输入确认指令。被确认的数据通过无线通信传送到与网络连接的计算机。如果操作者判断出不是正确的识别结果,则进程返回步骤501处理由通信俘获装置俘获的另一图象,并重复后继的处理步骤。
在步骤509传送到计算机的字符行由计算机或服务器接收。在步骤510区分字符行是URL地址还是其它字符行。如果字符行是URL地址,则在步骤511通过因特网链接该URL地址的万维网页,并在步骤512传送到移动装置。否则,在步骤513区分字符行是否为电子邮件地址。如果是电子邮件地址,则在步骤512向该装置传送该地址已经插入其地址字段的邮件处理程序。可以使用由Java等写成的应用程序实现邮件处理程序。进而,用于邮件处理的程序可以存储到移动装置以便再次使用。然而,当字符行既不是URL地址又不是电子邮件地址时,在步骤515它被输入到与因特网连接的内容搜索引擎,以便以该字符行作为关键字进行搜索。在步骤516,搜索的结果传送到该装置并呈现给操作者。
在移动装置侧,在步骤517接收内容,并在步骤518,操作者查看内容,以选择所需的内容,通过选择适当的按钮进行邮件处理等。
除了上述通过网络在移动装置和计算机之间数据传送处理共享之外,也可设想其它的活动。例如,在移动装置上选择目标字符行嵌入区域,然后向网络上的计算机传送本地的图象(而不是识别的结果)。然后,由计算机进行图象处理和字符识别。还有可以设想的传送装置用于把本地图象附加到邮件并将其传送。基于作为字符识别处理的结果而获得的多种候选项,根据候选项的顺序可在网络上对内容进行搜索。当使用多个候选项进行搜索,并找到适当的内容时,这些内容被传送到移动装置,并在其上显示。如果基于所有的候选项通过搜索没有找到适当的内容,改变参数以便重复字符识别处理。
使用上述的处理,只是在输入字符行嵌入区域确认指令之后操作者才能够查看所需的内容。然而,即使字符识别结果已经失败,如果存在任何对应的的内容,则显示与操作者所需要的那些不同的内容。
而且,可能对移动装置和计算机之间的传送和接收的服务进行收费。由于这种服务收费,在接收字符串(失败的结果)时,或在本地图象用作为来自移动装置被识别的对象时,或在内容向移动装置侧传送时,管理连接到网络的计算机的公司对操作者因服务而收费。操作者能够在确认字符串识别结果之后接收内容。结果是,保证稳定的服务。
图6示出字符行抽取处理的概念图。首先,标号601标记由移动装置的相机俘获的图象,602是其上描述了目标字符行的一对象。在显示器中心由标号603标记的符号是一记号。用于抽取位于靠近记号的字符行的处理被执行。通过由操作者点击触摸板或按钮,记号的屏上位置能够被移动。然后,输入图象被二值化。然后生成大量黑色象素连接的部件。标号604标记显示各连接部件的外围矩形轮廓的图象。使用连接部件的外围矩形位置信息进行字符行抽取的处理,以便加速处理。然后,选择并以605标记的粗体矩形轮廓指示最靠近记号的连接部件的外围矩形轮廓之一。连接部件用作为字符行抽取的初始状态的“核”。用作为“核”的连接部件不对操作者显示。标号606标记字符行抽取的进展。通过从605标记的核向外把相邻的连接部件结合在一起,形成字符行矩形条。然后,607标记作为向外结合的结果由连接部件组成的字符行矩形。标号608标记由操作者所见到的字符行矩形抽取结果的显示。虚线矩形条是字符行抽取结果。当操作者看见矩形条,且矩形条正确地封闭了目标字符行时,操作者通过按钮输入确认指令。当需要时通过移动该装置或平移记号而改变字符行结果矩形条。
图7示出字符行抽取处理的处理流程。字符行抽取处理以以下的方式实现。首先,在步骤701由图象俘获装置俘获图象。在步骤702使输入的图象二值化,并然后在步骤703进行噪声去除。接下来,在步骤704,从二值图象生成连接部件,并在步骤705选择最接近记号的连接部件作为初始值的“核”。然后在步骤706,在从作为“核”的连接部件起给定的短范围内使连接部件结合在一起以形成一字符行矩形条。然后,输出字符行位置。在步骤707在显示器中动态地显示该矩形条。进程返回到图象俘获步骤701,重复后继的处理步骤,直到用户在步骤708输入确认指令。当用户已经输入确认指令时,字符行位置进到对高分辨率字符行抽取处理。
图8示出高分辨率图象生成的概念图。在为识别处理输入字符行图象之前,作为对象的本地图象受到象素补充以生成高分辨率本地图象,改进识别率。标号801标记在操作者已经对字符行矩形条输入确认指令之后的显示。标号802标记通过对来自基于字符行矩形位置信息在图象俘获时获得的图象的本地图象的修剪而获得的图象。本地图象受到象素补充处理达到较高的分辨率,其结果是由标号803标记的图象。当以这种方式通过象素补充实现分辨率的提高时,每一模糊的线段以阶梯构型出现。这种情形下,对图象进行平滑处理。结果是,如同由804标记的图示那样,降低了噪声,使得模糊的线段的构型也变得平滑了。然后,进行二值化处理以生成高分辨率无噪声的字符模式图象。清晰的构型如805所标记的图示所示。即使使用低分辨率俘获装置,但通过输入高分辨率线条图象供识别处理,能够获得高分辨率的识别结果。
图9示出高分辨率图象生成的处理流程。首先,基于在字符行抽取处理中确定的字符行位置,在步骤901从图象俘获时获得的图象修剪本地图象。在步骤902通过象素补充本地图象受到图象扩展。然后扩展的图象在步骤903受到平滑处理,之后在步骤904被平滑化。结果是,生成高分辨率二值图象。
图10表示字符行识别处理的概念图。标号1001标记已经被输入的字符行图象。标号1002标记对于字符行图象为每一连接部件生成的字符模式候选项。标号1003标记只截取“h”获得的模式,而1004标记组合“ht”获得的模式。通过从这些组合中选择适当的字符模式,并在网络上进行路由搜索,能够获得字符行的识别结果。通过在网络上向字符识别模块输入模式而获得的结果由标号1005标记。需要说明如下:正如由1006标记的,对于“h”的模式1003获得“h”的识别结果;而如由1007的标记的,对于两个字符“ht”的组合模式的识别结果是“n”(即“ht”被手为“n”)。这样,对于每一模式的字符识别结果与用于字符识别的模板之间的相似性程度被记录在以分割假设图描绘的网络上。标号1008标记基于字数据库和识别结果之间的相似性程度通过网络进行路由搜索获得的结果,其中每一识别处理的记录已经被收集起来。这个例子中,对于常常作为URL出现的字(http,://,www.co.jp,com,等)的路由基于字数据库被筛选/缩减。对于其它字的每一路由使用识别结果的相似性程度作为索引而被确定。为了获得字数据库,以下的手段应考虑到:URL地址是从DNS(域名服务器)获得的,或者当符号牌等用作为对象时,现有的字是使用地理位置信息被筛选/缩减的。通过把确定的路由上的字符串在一起获得的字符行由标号1009标记,这是对字符行图象识别的结果。
图11示出字符行识别的处理流程。首先,在步骤1101对输入的字符行图象生成作为字符模式候选项的组合以便构成网络。然后,在步骤1102,各字符模式候选项受到字符识别,并且使其对应的识别结果和相似性程度相配。接下来在步骤1103,使用先前存储的字数据库进行网络上的路由限制。然后,使用字数据库限制和字符识别结果的相似性程度确定网络上最优路由。从而,获得字符行识别结果。
图12示出两个或多个字符序列识别结果。1201是移动装置的显示屏幕,1202是记号。当矩形对字符行诸如1203“ABCD RPOJECTco.”画出轮廓以进行识别操作时,对由矩形画出轮廓的字符行进行字符序列识别处理。每当在识别操作中引起模糊时,在弹出式框1204中出现两个或多个识别结果的候选项。在图12中,识别结果候选项的数目是三,而正确的回答是候选项1,操作者可以点击候选项1或输入号码“1”而选择候选项1。另外,用户能够简单地以手指或指点物体触摸触摸板。于是,选择了正确的识别结果,然后通过网络被传送到PC。此后,根据选择的字符序列进行处理。
使用上述的方法,能够选择由操作者确认的字符行,并从字符识别的结果获得信息内容。
根据本发明,能够对其上描述了给定的字符行的对象进行拍摄,并使用内置有图象俘获装置的移动装置基于字符行获得信息。进而,当操作者选择给定的字符行时,能够便于操作移动装置。而且进而,即使当使用低分辨率图象俘获装置时,能够通过以虚假的方式生成高分辨率图象,并进行字符识别处理而提高识别率。
本发明的原理、优选实施例及操作方式已经体现在上述说明书中。然而,应受到保护的本发明不限于所公开的特定的实施例。这里所述的实施例只是示例性而不是限制性的。在不背离本发明的精神之下可以通过其它及所采用的等价物作出变形和变化。因而,要强调的是,所有属于如权利要求中定义的本发明的精神和范围的这些变形和变化和等价物均包括在内。

Claims (19)

1、一种移动装置,包括:
用于连续多次获取图像的装置;
用于显示所述获取的图像以及记号的装置;
用于从所述获取的图像中抽取最接近所述记号而表示的字符行记载区域的装置;
用于确定由所述抽取装置抽取的字符行记载区域的装置,
其中,所述抽取装置根据所述获取的图像的更新多次抽取所述字符行记载区域并且在所述显示装置上显示根据该抽取结果被更新的字符行记载区域,直到在所述确定装置出现输入为止。
2、根据权利要求1的移动装置,其中
所述抽取装置检测所述获取的图像中的模式,并且
以最接近所述记号的所述模式作为核,通过连结接近的模式,从而抽取字符行记载区域。
3、根据权利要求1的移动装置,其中所述记号是可移动的。
4、根据权利要求1至3的任何一项的移动装置,其中
所述移动装置还包括:
用于识别所述被抽取出的记载区域中的字符行的字符行识别装置;
用于提示由该字符行识别装置识别的多个识别结果的装置;以及
用于选择所述多个识别结果之一的装置。
5、根据权利要求1或2的移动装置,其中
所述移动装置还包括:
分辨率提高装置,所述分辨率提高装置对于通过提取被确定的字符行记载区域而得到的部分像素进行像素补充,并对经过所述像素补充后的部分像素进行平滑化处理,然后再进一步进行2值化处理。
6、根据权利要求2的移动装置,其中
所述移动装置在所述模式进行连结时利用每个外接矩形来判断接近的模式。
7、一种字符行记载区域的抽取方法,
所述字符行记载区域的抽取方法用于在移动装置中从输入的图像数据中抽取字符行记载区域,包括以下步骤:
连续多次获取图像的第1步骤;
在该移动装置所具有的显示装置上显示所获取的图像以及记号的第2步骤;
从所述获取的图像中抽取最接近所述记号而表示的字符行记载区域的第3步骤,
其中,所述第3步骤根据所述获取的图像的更新多次抽取所述字符行记载区域,并且在所述显示装置上显示根据该抽取结果被更新的字符行记载区域。
8、根据权利要求7的字符行记载区域的抽取方法,其中
所述第3步骤检测所述获取的图像中的模式,并且
以最接近所述显示装置所显示的记号的所述模式作为核,通过连结接近的模式,从而抽取字符行记载区域。
9、根据权利要求7的字符行记载区域的抽取方法,其中
所述记号是可移动的。
10、根据权利要求7的字符行记载区域的抽取方法,其中包括:
用于识别所述被抽取出的字符行的第4步骤;
用于提示被识别的多个识别结果的第5步骤;以及
用于选择所述多个识别结果之一的第6步骤。
11、根据权利要求7的字符行记载区域的抽取方法,其中包括:
对于通过提取被确定的字符行记载区域而得到的部分像素进行像素补充,并对经过所述像素补充后的部分像素进行平滑化处理,然后再进行2值化处理的第7步骤。
12、根据权利要求8的字符行记载区域的抽取方法,其中
所述模式为所述获取的图像中的连结成分的外接矩形。
13、一种信息检索方法,
用于检索由移动装置通过网络获得的信息,其中包括:
由移动装置的图像获取装置获取图像的第1步骤;
确定所述获取的图像中的字符行记载区域的第2步骤;
识别所述确定的字符行记载区域所记载的字符行的第3步骤:
判别所述识别结果是表示地址信息的字符串还是其它的字符串的第4步骤;
当所述判别结果为其它字符串时,便以该字符串为基础检索所述网络内的信息,并用所述移动装置接收该检索结果的第5步骤。
14.根据权利要求13的信息检索方法,其中还包括:
在所述第3步骤之后显示该识别结果并接受用户的确定输入的步骤。
15.一种通信系统,
该通信系统由移动装置和通过网络与所述移动装置连接的计算机构成,
所述移动装置包括:
图像获取装置和该获取的图像的显示装置;
确定所述获取的图像中的字符行记载区域的装置;
在所述被确定的区域中进行字符行识别的装置;及
通过所述网络将所述识别结果传送至所述计算机的装置,
所述计算机包括:
判别所获取的识别结果是表示地址信息的字符串还是其它的字符串的装置;
当所述判别结果为其它字符串时,便以该字符串为基础启动检索程序检索所述网络内的信息,并将检索结果发送到所述移动装置的装置。
16.根据权利要求15的通信系统,其中
所述移动装置包括一个显示所述字符行识别结果并接受用户的确定输入的装置。
17.根据权利要求15的通信系统,其中
所述通信系统包括一个当所述移动装置接收由所述计算机传送来的所述结果时进行收费的装置。
18.一种服务器装置,
该服务器装置可以通过网络与移动装置进行通信,其中包括:
根据由所述移动装置的图像获取装置所获取的图像接收字符识别结果的装置,和接收包括由所述移动装置的图像获取装置所获取的图像中的字符行的部分图像,并根据接收图像进行字符识别的装置的至少一个装置;
判别该识别结果是表示地址信息的字符串还是其它的字符串的装置;及
当所述判别结果为其它字符串时,便以该字符串为基础启动检索程序检索所述网络内的信息,并将检索结果发送到所述移动装置的装置。
19.根据权利要求18的服务器装置,其中
所述服务器装置包括一个将所述检索结果发送到所述移动装置时进行收费的装置。
CNB021303312A 2001-09-05 2002-08-16 移动装置与传送系统 Expired - Lifetime CN1284398C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2001268194A JP4240859B2 (ja) 2001-09-05 2001-09-05 携帯端末装置及び通信システム
JP268194/2001 2001-09-05

Publications (2)

Publication Number Publication Date
CN1407826A CN1407826A (zh) 2003-04-02
CN1284398C true CN1284398C (zh) 2006-11-08

Family

ID=19094217

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB021303312A Expired - Lifetime CN1284398C (zh) 2001-09-05 2002-08-16 移动装置与传送系统

Country Status (4)

Country Link
US (1) US7190833B2 (zh)
JP (1) JP4240859B2 (zh)
KR (1) KR100942346B1 (zh)
CN (1) CN1284398C (zh)

Families Citing this family (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7680324B2 (en) 2000-11-06 2010-03-16 Evryx Technologies, Inc. Use of image-derived information as search criteria for internet and other search engines
US7565008B2 (en) 2000-11-06 2009-07-21 Evryx Technologies, Inc. Data capture and identification system and process
US7899243B2 (en) 2000-11-06 2011-03-01 Evryx Technologies, Inc. Image capture and identification system and process
US8224078B2 (en) 2000-11-06 2012-07-17 Nant Holdings Ip, Llc Image capture and identification system and process
US9310892B2 (en) 2000-11-06 2016-04-12 Nant Holdings Ip, Llc Object information derived from object images
US7903875B2 (en) 2002-08-07 2011-03-08 Panasonic Corporation Character recognition processing device, character recognition processing method, and mobile terminal device
JP2004118563A (ja) * 2002-09-26 2004-04-15 Fuji Photo Film Co Ltd 文字画像処理方法および装置並びにプログラム
JP3990253B2 (ja) * 2002-10-17 2007-10-10 埼玉日本電気株式会社 携帯電話装置
JP2004152036A (ja) * 2002-10-31 2004-05-27 Nec Saitama Ltd 文字認識機能付携帯電話機器及び認識文字の修正方法並びにプログラム
CN1532768A (zh) * 2003-03-26 2004-09-29 摩托罗拉公司 将数字图像的字段类型分类的方法和设备
EP1630722A4 (en) * 2003-06-02 2007-08-15 Sharp Kk PORTABLE INFORMATION TERMINAL
KR100584344B1 (ko) * 2003-06-10 2006-05-26 삼성전자주식회사 영상입력부를 가진 휴대용 단말기에서 문자를 인식하는 방법
JP4269811B2 (ja) * 2003-07-09 2009-05-27 株式会社日立製作所 携帯電話
US7305435B2 (en) * 2003-08-25 2007-12-04 Nokia Corporation Internet access via smartphone camera
JP4036168B2 (ja) * 2003-09-09 2008-01-23 株式会社日立製作所 携帯電話
CN100346657C (zh) * 2004-02-18 2007-10-31 惠州Tcl移动通信有限公司 名片信息转化到手机电话本中的方法
US7751805B2 (en) * 2004-02-20 2010-07-06 Google Inc. Mobile image-based information retrieval system
US20070159522A1 (en) * 2004-02-20 2007-07-12 Harmut Neven Image-based contextual advertisement method and branded barcodes
US8421872B2 (en) * 2004-02-20 2013-04-16 Google Inc. Image base inquiry system for search engines for mobile telephones with integrated camera
US20050193018A1 (en) * 2004-02-29 2005-09-01 Per Rosdahl Utilizing a scannable URL (Universal Resource Locator)
US7499588B2 (en) * 2004-05-20 2009-03-03 Microsoft Corporation Low resolution OCR for camera acquired documents
JP4599896B2 (ja) * 2004-06-07 2010-12-15 オムロン株式会社 データ名決定装置
US7173538B2 (en) * 2004-06-25 2007-02-06 Rm2, Inc. Apparatus, system and method for monitoring a drying procedure
KR20060050729A (ko) * 2004-08-31 2006-05-19 엘지전자 주식회사 카메라로 촬영된 문서 영상 처리 방법과 장치
KR20060050746A (ko) * 2004-08-31 2006-05-19 엘지전자 주식회사 카메라로 촬영된 문서 영상 처리 방법
JP2006119942A (ja) * 2004-10-22 2006-05-11 Hitachi Ltd 文字列領域切り出し装置
JP2006129033A (ja) * 2004-10-28 2006-05-18 Kyocera Corp 電子機器および撮影方法
JP4802502B2 (ja) * 2005-01-21 2011-10-26 株式会社日立製作所 単語認識装置および単語認識方法
JP4453016B2 (ja) * 2005-01-31 2010-04-21 株式会社カシオ日立モバイルコミュニケーションズ 携帯端末、文字読取方法および文字読取プログラム
JP2006227768A (ja) * 2005-02-16 2006-08-31 Hitachi Omron Terminal Solutions Corp 携帯端末における文字認識のための方法およびプログラム
KR100754656B1 (ko) * 2005-06-20 2007-09-03 삼성전자주식회사 이미지와 관련한 정보를 사용자에게 제공하는 방법 및시스템과 이를 위한 이동통신단말기
DE102005033001A1 (de) * 2005-07-14 2007-01-25 Siemens Ag Verfahren zur Optimierung von Kontrollvorgängen beim Einsatz mobiler Endgeräte
KR100628101B1 (ko) * 2005-07-25 2006-09-26 엘지전자 주식회사 문자 입력 기능을 갖는 이동통신단말기 및 이를 이용한방법
US7480422B2 (en) * 2005-10-14 2009-01-20 Disney Enterprises, Inc. Systems and methods for information content delivery relating to an object
US7801359B2 (en) * 2005-10-14 2010-09-21 Disney Enterprise, Inc. Systems and methods for obtaining information associated with an image
US8023746B2 (en) * 2005-10-14 2011-09-20 Disney Enterprises, Inc. Systems and methods for decoding an image to determine a digital identifier
JP4730775B2 (ja) * 2005-12-14 2011-07-20 株式会社リコー 画像処理装置
US7917286B2 (en) 2005-12-16 2011-03-29 Google Inc. Database assisted OCR for street scenes and other images
US7986843B2 (en) * 2006-11-29 2011-07-26 Google Inc. Digital image archiving and retrieval in a mobile device system
CN101193158B (zh) * 2006-11-30 2010-12-08 财团法人工业技术研究院 应用行动通信设备翻译影像文字的方法及其系统
US9015029B2 (en) * 2007-06-04 2015-04-21 Sony Corporation Camera dictionary based on object recognition
US8184910B2 (en) * 2008-03-18 2012-05-22 Toshiba Tec Kabushiki Kaisha Image recognition device, image recognition method, and image scanning apparatus having image recognition device
KR101012729B1 (ko) * 2008-10-31 2011-02-09 한국과학기술원 마커를 이용한 문자열 추출 시스템 및 그 방법
US9563815B2 (en) * 2009-09-15 2017-02-07 Tandent Vision Science, Inc. Method and system for processing an image received from a remote source
JP2010113735A (ja) * 2010-01-21 2010-05-20 Omron Corp データ名決定装置
KR101722550B1 (ko) 2010-07-23 2017-04-03 삼성전자주식회사 휴대용 단말에서 증강현실 컨텐츠 제작과 재생 방법 및 장치
US8983191B2 (en) * 2010-10-18 2015-03-17 Echostar Uk Holdings Limited Dynamic recognition of web addresses in video
TWI478074B (zh) * 2010-12-01 2015-03-21 Inst Information Industry 文字辨識方法、裝置以及儲存其之電腦可讀取紀錄媒體
FR2979027A1 (fr) * 2011-08-12 2013-02-15 Epic Dream Procede de compensation d'une offre de remboursement dematerialisee et application logicielle pour la mise en oeuvre du procede
DE102011055362A1 (de) 2011-11-15 2013-05-16 Dewert Antriebs- Und Systemtechnik Gmbh Anordnung mit einem elektromotorischen Möbelantrieb und einem Datengerät; Verfahren zum Herstellen einer Kommunikationsverbindung zwischen dem elektromotorischen Möbelantrieb und dem Datengerät; und ein entsprechender Möbelantrieb
JP5964078B2 (ja) * 2012-02-28 2016-08-03 学校法人東京電機大学 文字認識装置、文字認識方法およびプログラム
KR101911803B1 (ko) * 2012-08-10 2018-10-26 삼성전자주식회사 휴대용 단말 장치 및 그 동작 방법
US9569679B1 (en) * 2012-12-04 2017-02-14 A9.Com, Inc. Adaptive image sampling for text detection
US20140272819A1 (en) * 2013-03-15 2014-09-18 Chinese Cubes Co. Ltd. Computer-implemented language heuristics
US9286683B1 (en) * 2013-04-17 2016-03-15 Amazon Technologies, Inc. Text detection near display screen edge
US9239961B1 (en) * 2014-09-24 2016-01-19 Amazon Technologies, Inc. Text recognition near an edge
US11341739B2 (en) * 2016-02-15 2022-05-24 Nec Corporation Image processing device, image processing method, and program recording medium
JP6408055B2 (ja) 2017-03-22 2018-10-17 株式会社東芝 情報処理装置、方法及びプログラム
JP6448696B2 (ja) 2017-03-22 2019-01-09 株式会社東芝 情報処理装置、方法及びプログラム
US10819284B2 (en) 2018-09-21 2020-10-27 The Trustees Of Columbia University In The City Of New York Circuits for modulated-mixer-clock multi-branch receivers
CN112347948A (zh) * 2020-11-10 2021-02-09 腾讯科技(深圳)有限公司 图片搜索方法、装置、设备及计算机程序产品

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2701350B2 (ja) 1988-08-25 1998-01-21 日本電気株式会社 文書読取装置
JPH02274173A (ja) 1989-04-17 1990-11-08 Ricoh Co Ltd 文字分離装置
JPH03168888A (ja) 1989-11-29 1991-07-22 Fujitsu Ltd 文字認識方式
JP3019897B2 (ja) 1993-01-21 2000-03-13 沖電気工業株式会社 行切出し方法
FI115739B (fi) * 1994-05-19 2005-06-30 Nokia Corp Laite henkilökohtaiseen viestintään, tietojenkeruuseen ja -käsittelyyn ja piirikortti
JPH10254622A (ja) 1997-03-11 1998-09-25 Hitachi Ltd 情報処理装置
KR100286301B1 (ko) * 1997-12-30 2001-04-16 구자홍 문자인식장치
US6330976B1 (en) * 1998-04-01 2001-12-18 Xerox Corporation Marking medium area with encoded identifier for producing action through network
JP4128275B2 (ja) 1998-07-06 2008-07-30 オリンパス株式会社 翻訳機能付カメラ
US6501565B1 (en) * 1998-07-07 2002-12-31 Electronics For Imaging, Inc. Method and apparatus for smoothing text outlines
JP2000207338A (ja) 1999-01-20 2000-07-28 Sony Corp 情報処理装置および方法、並びに提供媒体
US6883000B1 (en) * 1999-02-12 2005-04-19 Robert L. Gropper Business card and contact management system
JP2000331006A (ja) 1999-05-18 2000-11-30 Nippon Telegr & Teleph Corp <Ntt> 情報検索装置
US6594503B1 (en) * 2000-02-02 2003-07-15 Motorola, Inc. Communication device with dial function using optical character recognition, and method
JP2002152696A (ja) * 2000-11-10 2002-05-24 Hitachi Ltd 携帯端末

Also Published As

Publication number Publication date
JP2003078640A (ja) 2003-03-14
CN1407826A (zh) 2003-04-02
JP4240859B2 (ja) 2009-03-18
KR20030021120A (ko) 2003-03-12
KR100942346B1 (ko) 2010-02-12
US7190833B2 (en) 2007-03-13
US20030044068A1 (en) 2003-03-06

Similar Documents

Publication Publication Date Title
CN1284398C (zh) 移动装置与传送系统
CN102594857B (zh) 移动设备上的图像识别和共享
KR100664421B1 (ko) 구비된 카메라를 이용한 명함 인식을 위한 휴대용 단말기및 명함 인식 방법
US7447362B2 (en) System and method of enabling a cellular/wireless device with imaging capabilities to decode printed alphanumeric characters
US7761326B2 (en) Token type content providing system and token type content providing method and portable user terminal
US20050050165A1 (en) Internet access via smartphone camera
US20120287070A1 (en) Method and apparatus for notification of input environment
CN1604120A (zh) 从指定的文档区域提取元数据
CN102375752A (zh) 与便携式终端共享应用的装置及方法
US20090017765A1 (en) System and Method of Enabling a Cellular/Wireless Device with Imaging Capabilities to Decode Printed Alphanumeric Characters
CN1832513A (zh) 包括用于字符识别的数字摄像头的无线电信终端及其网络
EP2012510A1 (en) Method and apparatus for connecting a cellular telephone user to the internet
CN111310750B (zh) 一种信息处理方法、装置、计算设备及介质
US20080137958A1 (en) Method of utilizing mobile communication device to convert image character into text and system thereof
EP1571587A2 (en) Method and apparatus for utilizing a scannable URL (universal resource locator)
KR20160118198A (ko) 실시간 자동번역 시스템 및 방법, 실시간 자동번역이 가능한 단말기
US7286722B2 (en) Memo image managing apparatus, memo image managing system and memo image managing method
CN104598289B (zh) 一种识别方法及一种电子设备
KR102142238B1 (ko) 소정 이미지에 포함된 축약어, 손글씨, 비정형 단어 및 문장과 같은 텍스트 정보를 추출한 후 그 추출 결과를 소정 언어로 자동 번역하는 방법
CN1459073A (zh) 识别并处理数字图像中的命令的方法和装置,其中用户通过例如将其环绕而标记命令
CN110858198B (zh) 撷取联系人信息的系统、非暂时性计算机可读介质和方法
CN114782955A (zh) 埋点处理方法、电子设备、存储介质
CN113159029A (zh) 一种图片中局部信息精准抓取的方法和系统
CN1808466A (zh) 单词识别装置
JP2005044052A (ja) 携帯型文字認識装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: HITACHI LTD.

Free format text: FORMER OWNER: HITACHI,LTD.

Effective date: 20130718

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20130718

Address after: Tokyo, Japan

Patentee after: HITACHI CONSUMER ELECTRONICS Co.,Ltd.

Address before: Tokyo, Japan

Patentee before: Hitachi, Ltd.

ASS Succession or assignment of patent right

Owner name: HITACHI MAXELL LTD.

Free format text: FORMER OWNER: HITACHI LTD.

Effective date: 20150327

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150327

Address after: Osaka, Japan

Patentee after: Hitachi Maxell, Ltd.

Address before: Tokyo, Japan

Patentee before: Hitachi Consumer Electronics Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20171215

Address after: Kyoto Japan

Patentee after: MAXELL, Ltd.

Address before: Osaka, Japan

Patentee before: Hitachi Maxell, Ltd.

CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Kyoto Japan

Patentee after: MAXELL, Ltd.

Address before: Kyoto Japan

Patentee before: MAXELL HOLDINGS, Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220613

Address after: Kyoto Japan

Patentee after: MAXELL HOLDINGS, Ltd.

Address before: Kyoto, Japan

Patentee before: MAXELL, Ltd.

CX01 Expiry of patent term
CX01 Expiry of patent term

Granted publication date: 20061108