公开(公告)号：US09020966B2

公开(公告)日：2015-04-28

申请号：US12340124

申请日：2008-12-19

申请人： Berna Erol ,  Jorge Moraleda ,  Jonathan J. Hull

发明人： Berna Erol ,  Jorge Moraleda ,  Jonathan J. Hull

IPC分类号： G06F17/30 ,  G06K9/00 ,  G06K9/03 ,  G06K9/62

CPC分类号： G06F17/30247 ,  G06F17/30026 ,  G06F17/30038 ,  G06F17/30047 ,  G06F17/30876 ,  G06K9/00463 ,  G06K9/00979 ,  G06K9/036 ,  G06K9/6217 ,  G06K9/6227 ,  G06K9/6262 ,  G06K9/6292

摘要： The mobile device includes a client that has a number of modules, and the MMR Gateway and MMR matching unit are implemented as a server that has a number of modules. The implementation of the MMR system as a client and a server is advantageous because the modules may be distributed among the client and the server in a variety of configurations. The present invention includes a capture module, a preprocessing module, a feature extraction module, a retrieval module, a send message module, an action module, a prediction module, a feedback module, a sending module, an MMR database, a streaming module, an e-mail module, a voice recognition system and an audio database. These modules and systems are operational upon the client or the server.

摘要翻译： 移动设备包括具有多个模块的客户端，并且MMR网关和MMR匹配单元被实现为具有多个模块的服务器。 作为客户机和服务器的MMR系统的实现是有利的，因为模块可以以各种配置分布在客户端和服务器之间。 本发明包括捕获模块，预处理模块，特征提取模块，检索模块，发送消息模块，动作模块，预测模块，反馈模块，发送模块，MMR数据库，流模块， 电子邮件模块，语音识别系统和音频数据库。 这些模块和系统可在客户端或服务器上运行。

公开(公告)号：US08949287B2

公开(公告)日：2015-02-03

申请号：US11461085

申请日：2006-07-31

申请人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Daniel G. Van Olst

发明人： Jonathan J. Hull ,  Berna Erol ,  Jamey Graham ,  Daniel G. Van Olst

IPC分类号： G06F17/30 ,  G06K9/00

CPC分类号： G06K9/00442

摘要： A Mixed Media Reality (MMR) system and associated techniques are disclosed. The MMR system provides mechanisms for forming a mixed media document that includes media of at least two types (e.g., printed paper as a first medium and digital content and/or web link as a second medium). In one particular embodiment, the MMR system includes a method, system, and computer program product for adding a hotspot to an imaged document. A source document is converted to an imaged document, from which features are extracted. Hotspots are added to the imaged document, and the imaged document, hotspot definitions, and the feature representation are stored.

摘要翻译： 公开了混合媒体现实（MMR）系统及其相关技术。 MMR系统提供用于形成包括至少两种类型的媒体（例如，作为第一媒体的打印纸和作为第二媒体的数字内容和/或web链接）的混合媒体文档的机制。 在一个特定实施例中，MMR系统包括用于将热点添加到成像文档的方法，系统和计算机程序产品。 源文档被转换为成像文档，从中提取特征。 将热点添加到成像文档中，并存储成像文档，热点定义和特征表示。

公开(公告)号：US20140306810A1

公开(公告)日：2014-10-16

申请号：US14276910

申请日：2014-05-13

申请人： Sergey Chemishkian ,  Jonathan J. Hull

发明人： Sergey Chemishkian ,  Jonathan J. Hull

IPC分类号： G06K7/10 ,  G06K7/00

CPC分类号： G06K7/10158 ,  G06K7/0008 ,  G06K7/10297 ,  H04W84/18 ,  H04W88/04 ,  H04W88/06

摘要： Passive RF devices are disclosed that communicate using a wireless network protocol. The device includes an antenna operable to receive a radio frequency (RF) signal from a RF source that transmits the RF signal based on a wireless network protocol. The device further includes circuitry operable to derive power from the RF signal. With the power derived from the RF signal, the circuitry is further operable to read data from a memory, to encode the data based on the wireless network protocol, and to modulate the RF signal to include the encoded data. The antenna is further operable to transmit the modulated RF signal based on the wireless network protocol for reception by the RF source or another passive RF device.

摘要翻译： 公开了使用无线网络协议进行通信的无源RF设备。 该装置包括可操作以从RF源接收射频（RF）信号的天线，RF信号基于无线网络协议发送RF信号。 该装置还包括可操作以从RF信号导出功率的电路。 利用从RF信号导出的功率，电路还可操作以从存储器读取数据，基于无线网络协议对数据进行编码，并且调制RF信号以包括编码数据。 天线进一步可操作以基于无线网络协议传送调制的RF信号，以供RF源或另一无源RF设备接收。

公开(公告)号：US08825682B2

公开(公告)日：2014-09-02

申请号：US12210511

申请日：2008-09-15

申请人： Hidenobu Kishi ,  Sadao Takahashi ,  Takahiro Furukawa ,  Berna Erol ,  Jonathan J. Hull ,  Jorge Moraleda ,  Jamey Graham

发明人： Hidenobu Kishi ,  Sadao Takahashi ,  Takahiro Furukawa ,  Berna Erol ,  Jonathan J. Hull ,  Jorge Moraleda ,  Jamey Graham

IPC分类号： G06F17/30 ,  G06F17/00 ,  G06F15/16 ,  G06K9/38 ,  G06K9/34 ,  G06K15/00

CPC分类号： G06F17/30 ,  G06F15/16 ,  G06F17/00 ,  G06F17/30247 ,  G06F17/30876 ,  G06K9/00463 ,  G06K9/34 ,  G06K9/38 ,  G06K9/6227 ,  G06K9/6256 ,  G06K15/00 ,  H04L67/02 ,  H04N1/00244 ,  H04N1/00307 ,  H04N1/32765 ,  H04N1/32776

摘要： A MMR system for publishing comprises a plurality of mobile devices, an MMR gateway, an MMR matching unit and an MMR publisher. The mobile devices send retrieval requests including image queries and other contextual information. The MMR gateway processes the retrieval request from the mobile devices and then generates an image query that is passed on to the MMR matching unit. The MMR matching unit receives an image query from the MMR gateway and sends it to one or more of the recognition units to identify a result including a document, the page and the location on the page. The MMR matching unit includes an image registration unit that receives new content from the MMR publisher and updates the index table of the MMR matching unit. A method for automatically registering images and other data with the MMR matching unit, a method for dynamic load balancing and a method for image-feature-based queue ordering are also included.

摘要翻译： 用于发布的MMR系统包括多个移动设备，MMR网关，MMR匹配单元和MMR发布者。 移动设备发送检索请求，包括图像查询和其他上下文信息。 MMR网关处理来自移动设备的检索请求，然后生成传递到MMR匹配单元的图像查询。 MMR匹配单元从MMR网关接收图像查询，并将其发送到一个或多个识别单元，以识别包括文档，页面和页面上的位置的结果。 MMR匹配单元包括从MMR发布者接收新内容并更新MMR匹配单元的索引表的图像注册单元。 还包括用于使用MMR匹配单元自动注册图像和其他数据的方法，用于动态负载平衡的方法和用于基于图像特征的队列排序的方法。

公开(公告)号：US08793589B2

公开(公告)日：2014-07-29

申请号：US13205473

申请日：2011-08-08

申请人： Jonathan J. Hull ,  Peter Hart

发明人： Jonathan J. Hull ,  Peter Hart

IPC分类号： G06F3/00 ,  G06F3/048 ,  G06F3/044

CPC分类号： G06F3/044

摘要： In one embodiment, a method for combining the user interfaces of several applications is disclosed. Data generated by a first application is extracted from a display buffer. The data is associated with a user interface from the first application. From the extracted data, a layout pattern is recognized. Using the layout, an overlay is created. The overlay is used to display a second data generated by a second application. There is no direct link between the first application and the second application.

摘要翻译： 在一个实施例中，公开了用于组合若干应用的用户界面的方法。 从显示缓冲器提取由第一应用产生的数据。 该数据与来自第一应用的用户界面相关联。 从提取的数据中，识别布局图案。 使用布局，创建一个覆盖。 覆盖层用于显示由第二应用产生的第二数据。 第一个应用程序和第二个应用程序之间没有直接的链接。

公开(公告)号：US08761706B2

公开(公告)日：2014-06-24

申请号：US13216810

申请日：2011-08-24

申请人： Sergey Chemishkian ,  Jonathan J. Hull

发明人： Sergey Chemishkian ,  Jonathan J. Hull

IPC分类号： H04B1/18 ,  H04W4/00

CPC分类号： G06K7/10158 ,  G06K7/0008 ,  G06K7/10297 ,  H04W84/18 ,  H04W88/04 ,  H04W88/06

摘要： Passive RF devices are disclosed that communicate using a wireless network protocol. The device includes an antenna operable to receive a radio frequency (RF) signal from a RF source that transmits the RF signal based on a wireless network protocol. The device further includes circuitry operable to derive power from the RF signal. With the power derived from the RF signal, the circuitry is further operable to read data from a memory, to encode the data based on the wireless network protocol, and to modulate the RF signal to include the encoded data. The antenna is further operable to transmit the modulated RF signal based on the wireless network protocol for reception by the RF source or another passive RF device.

摘要翻译： 公开了使用无线网络协议进行通信的无源RF设备。 该装置包括可操作以从RF源接收射频（RF）信号的天线，RF信号基于无线网络协议发送RF信号。 该装置还包括可操作以从RF信号导出功率的电路。 利用从RF信号导出的功率，电路还可操作以从存储器读取数据，基于无线网络协议对数据进行编码，并且调制RF信号以包括编码数据。 天线进一步可操作以基于无线网络协议传送调制的RF信号，以供RF源或另一无源RF设备接收。

公开(公告)号：US08510283B2

公开(公告)日：2013-08-13

申请号：US12210519

申请日：2008-09-15

申请人： Jonathan J. Hull ,  Berna Erol ,  Jorge Moraleda

发明人： Jonathan J. Hull ,  Berna Erol ,  Jorge Moraleda

IPC分类号： G06F7/00 ,  G06F17/30

CPC分类号： G06F17/30247 ,  G06F17/30876 ,  G06K9/00463 ,  G06K9/00993 ,  G06K9/6227 ,  G06K9/6256 ,  G06K9/6262

摘要： A MMR system for newspaper publishing includes a plurality of mobile devices, an MMR gateway, an MMR matching unit and an MMR publisher. The MMR matching unit receives an image query from the MMR gateway and sends it to one or more of the recognition units to identify a result including a document, the page and the location on the page. The image registration unit includes an indexing unit for generating images adapted to the environment and capabilities of the image capture device. The indexing unit also automatically adapts the configuration of the plurality of recognition units and index tables based upon image queries applied to the plurality of recognition and index tables. The plurality of recognition units and index tables are configured based on content they reference, recognition algorithm used or other factors.

摘要翻译： 用于报纸出版的MMR系统包括多个移动设备，MMR网关，MMR匹配单元和MMR发布者。 MMR匹配单元从MMR网关接收图像查询，并将其发送到一个或多个识别单元，以识别包括文档，页面和页面上的位置的结果。 图像注册单元包括索引单元，用于生成适于图像采集设备的环境和能力的图像。 索引单元还基于应用于多个识别和索引表的图像查询自动地适配多个识别单元和索引表的配置。 基于它们所引用的内容，所使用的识别算法或其他因素来配置多个识别单元和索引表。

公开(公告)号：US08493601B2

公开(公告)日：2013-07-23

申请号：US12980097

申请日：2010-12-28

申请人： Jonathan J. Hull ,  Jamey Graham ,  Dar-Shyang Lee

发明人： Jonathan J. Hull ,  Jamey Graham ,  Dar-Shyang Lee

IPC分类号： G06F3/12 ,  G06F19/00 ,  G06K15/00 ,  H04Q5/22

CPC分类号： G01S11/02 ,  G06F17/30876 ,  G06K7/0008 ,  G06K7/10079 ,  G06K7/10356

摘要： According to one set of embodiments, techniques are provided for performing actions based upon physical locations of one or more paper documents. According to another set of embodiments, techniques are provided for tracking the physical locations of paper documents. According to another set of embodiments, techniques are provided for determining electronic document information for paper documents. According to another set of embodiments, techniques are provided for determining and tracking the contents of a container. According to another set of embodiments, a document security system is provided. According to another set of embodiments, techniques are provided for tracking documents in a workflow.

摘要翻译： 根据一组实施例，提供了用于基于一个或多个纸质文档的物理位置执行动作的技术。 根据另一组实施例，提供了用于跟踪纸质文档的物理位置的技术。 根据另一组实施例，提供了用于确定纸质文档的电子文档信息的技术。 根据另一组实施例，提供了用于确定和跟踪容器内容的技术。 根据另一组实施例，提供文档安全系统。 根据另一组实施例，提供了用于跟踪工作流中的文档的技术。

公开(公告)号：US08156427B2

公开(公告)日：2012-04-10

申请号：US11461143

申请日：2006-07-31

申请人： Jamey Graham ,  Berna Erol ,  Peter E. Hart ,  Jonathan J. Hull

发明人： Jamey Graham ,  Berna Erol ,  Peter E. Hart ,  Jonathan J. Hull

IPC分类号： G06F17/00

CPC分类号： G06K9/00442 ,  G06F17/30011

摘要： A Mixed Media Reality (MMR) system and associated techniques are disclosed. The MMR system provides mechanisms for forming a mixed media document that includes media of at least two types (e.g., printed paper as a first medium and digital content and/or web link as a second medium). In one embodiment, an MMR document is retrieved based on recognition of a paper document. Responsive to a comparison of the paper document and a virtual multimedia document, a set of actions is displayed to a user. Responsive to a user selection, the user-selected action is performed. In another embodiment, a captured list of names is used to assist a user with labeling a media file.

摘要翻译： 公开了混合媒体现实（MMR）系统及其相关技术。 MMR系统提供用于形成包括至少两种类型的媒体（例如，作为第一媒体的打印纸和作为第二媒体的数字内容和/或web链接）的混合媒体文档的机制。 在一个实施例中，基于对纸质文档的识别来检索MMR文档。 响应于纸张文档和虚拟多媒体文档的比较，向用户显示一组动作。 响应于用户选择，执行用户选择的动作。 在另一个实施例中，捕获的名称列表用于帮助用户标记媒体文件。

公开(公告)号：US08156116B2

公开(公告)日：2012-04-10

申请号：US12342330

申请日：2008-12-23

申请人： Jamey Graham ,  Jonathan J. Hull

发明人： Jamey Graham ,  Jonathan J. Hull

IPC分类号： G06F17/30

CPC分类号： G06Q30/0256 ,  G06F17/30035 ,  G06F17/30047 ,  G06F17/30247 ,  G06F17/30477 ,  G06F17/30528 ,  G06F17/30554 ,  G06F17/30648 ,  G06F17/30699 ,  G06F17/30867 ,  G06F17/30876 ,  G06K9/00463 ,  G06K9/6227 ,  G06K9/6262 ,  G06K9/6292 ,  G06Q30/02 ,  G06Q30/0241

摘要： A context-aware targeted information delivery system comprises a mobile device, an MMR matching unit, a plurality of databases for user profiles, user context and advertising information, a plurality of comparison engines and a plurality of weight adjusters. The mobile device is coupled to deliver an image patch to the MMR matching unit which in turn performs recognition to produce recognize text. The recognized text is provided to a first and second comparison engines to produce relevant topics and relevant ads. The relevant topics and relevant ads are adjusted with information from a user context database including information such as location, date, time, and other information from a user profile. The weight adjusted relevant topics and relevant ads to a third comparison engine. The third comparison engine compares the weighted relevant topics and relevant ads to produce a set of final ads that are most related to the topics of interest for the user and delivered for display on to the mobile device.

摘要翻译： 上下文感知目标信息传递系统包括移动设备，MMR匹配单元，用于用户简档的多个数据库，用户上下文和广告信息，多个比较引擎和多个权重调节器。 移动设备被耦合以将图像补丁传送到MMR匹配单元，MMR匹配单元又进行识别以产生识别文本。 将识别的文本提供给第一和第二比较引擎以产生相关主题和相关广告。 相关主题和相关广告根据来自用户上下文数据库的信息进行调整，包括来自用户简档的位置，日期，时间等信息。 重量调整相关主题和相关广告到第三个比较引擎。 第三个比较引擎将加权相关主题和相关广告进行比较，以生成与用户感兴趣的主题最相关并投放到移动设备上的一组最终广告。