CN1804839A - 用于数据的基于时间线的可视化的体系结构和引擎 - Google Patents

用于数据的基于时间线的可视化的体系结构和引擎 Download PDF

Info

Publication number
CN1804839A
CN1804839A CNA2005101370331A CN200510137033A CN1804839A CN 1804839 A CN1804839 A CN 1804839A CN A2005101370331 A CNA2005101370331 A CN A2005101370331A CN 200510137033 A CN200510137033 A CN 200510137033A CN 1804839 A CN1804839 A CN 1804839A
Authority
CN
China
Prior art keywords
band
district
user
time
objects
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2005101370331A
Other languages
English (en)
Other versions
CN1804839B (zh
Inventor
S·F·威廉斯
S·J·鲍尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN1804839A publication Critical patent/CN1804839A/zh
Application granted granted Critical
Publication of CN1804839B publication Critical patent/CN1804839B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/26Visual data mining; Browsing structured data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/54Browsing; Visualisation therefor
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10TECHNICAL SUBJECTS COVERED BY FORMER USPC
    • Y10STECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y10S715/00Data processing: presentation processing of document, operator interface processing, and screen saver display processing
    • Y10S715/961Operator interface with visual structure or function dictated by intended use
    • Y10S715/965Operator interface with visual structure or function dictated by intended use for process control and configuration
    • Y10S715/966Computer process, e.g. operation of computer
    • Y10S715/968Computer process, e.g. operation of computer interface for database querying and retrieval

Abstract

本发明提供了一种便于通过使用独特的基于时间线的导航工具来管理和导航各种数据对象的独特的系统和方法。具体地,对象可基于其各自的主题被组织成多个区带。每一区带可被创建来指定特定的主题。例如,对象部分地基于诸如创建对象的时间或日期等时间参数在适当的区带内组织。导航工具允许用户依照期望的时间参数或时间范围来导航或浏览区带和对象。缩放和其它浏览选项对用户可用,以在各种细节级别查看感兴趣的对象。对象被表示为可操作的ASCII缩略图。由此,任何对象的内容可直接通过缩略图来修改。

Description

用于数据的基于时间线的可视化的体系结构和引擎
技术领域
本发明一般涉及导航和查看数据,尤其涉及使用独特的基于时间线的参数或工具对所维护和组织的数据对象的可视化、动态操纵及与其的交互。
背景技术
在当前计算环境中,对用户只有有限的查看、浏览和文件组织技术可用。例如,现有的应用程序大部分都采用了树结构的文件夹格式来组织和显示各种类型的文件。尽管可查看文件夹、子文件夹和文件之间的某些关系,然而这一关系在范围上受到限制,且主要依赖于明确的用户输入。例如,文件可如用户所指示的依照其公共文件夹或子文件夹来建立联系。
此外,在多个文件夹或子文件夹内的多个文件之间查看或导航可能是有问题的,且由于屏幕空间的限制几乎是不可行的。由此,在当前的实践中,多个活动文档之间的用户交互是不可行的。总体上,常规的文件和文件夹组织方法仅提供了对个别文件的完全不同的视图,由此要求更多的用户时间和资源来处理和/或管理文件、文档等等。
发明内容
下文提出了本发明的简化概述,以提供对本发明某些方面的基本理解。该概述不是本发明的广泛综述。它不旨在标识本发明的关键/决定性元素或限定本发明的范围。其唯一的目的是以简化的形式提出本发明的某些概念,作为稍后提出的更详细描述的序言。
本发明涉及一种便于通过使用独特用户界面来导航和管理数据的系统和/或方法。更具体地,数据(个别地被称为对象)可以在一个或多个可定义的类别或区带(band)中表示。在每一区带中或跨多个区带,可以用各种缩放深度,单独或与聚类相关地查看对象—取决于缩放深度和可用的屏幕空间。然而,与常规技术不同,对象可依照基于时间的参数来排列,该参数对于每一对象是唯一或专用的。另外,对象的浏览可部分地通过使用基于时间线的导航工具来实现。由此,用户可更容易地理解和提取一个区带内或跨多个区带的各种对象之间的许多可能的关系。用户通常在对象和时间之间作出无意义的关联。因此,通过允许用户基于时间元素以及按照主题来查看和组织对象,可具有更丰富且更有意义的用户体验。
依照本发明的一方面,可在查看对象时对一个或多个对象执行多个操作,而不论对象的类型如何(例如,照片、文档、网页、扫描的文档、消息等)。具体地,对象可作为缩略图来查看,由此可以使许多对象的内容对用户可见。可采用许多不同类型的缩略图。一种方法涉及ASCII缩略图。ASCII缩略图本质上是一种基于文本的概要,它定义了以较大对象表示的文本的本质。其它可能类型的缩略图包括图像、音频、视频或表示实际对象的代理的其它媒体缩略图。ASCII(或任何其它类型)缩略图也可以被按比例缩放以仅显示与可在对该缩略图可用的空间中适合的一样多的文本。文本可关于最大化给定显示空间的意义来智能地按比例缩放。
每一对象的可视内容的量可取决于当前缩放深度。例如,当用户放大对象的区带或组时,可更容易地看到每一对象或组的更多内容。当用户缩小时,相对抽象的视图以及对象的较少细节可见。此外,用户本质上可在任一时间段上剥除内容的底层,并且通过如此做,能够剥离密集对象以进行更详细的查看—这主要是通过采用定位设备或显示器上的各种缩放按钮或缩放控件来实现的。
除表示实际对象之外,对象的缩略图也可以是可操作或可动作的,使得用户可在其上点击以直接访问和/或修改对象的内容。因此,不需要打开或访问控制内容的单独的应用程序(例如,电子邮件程序、文字处理程序等)来对该内容作出改变或保存改变。例如,如果缩略图指示网页,则用户可简单地在其上点击并访问特定的页面。缩略图也可以是动态的,由此当实际对象的内容改变时,缩略图的内容也改变。
当在区带之间引入、移动或复制对象时,依照各自区带的元数据可被用于注释特定的对象。可根据用户偏好向对象快速注释显式和隐式元数据。例如,用户可向对象提供标题或名称(例如,显式元数据);或者系统可使用某一形式的人工智能找出相关的对象并输入那些相关对象的适当元数据(例如,隐式元数据)。对象或对象聚类可用不同类型的元数据来注释,包括文本、笔、语音或其它音频。
依照本发明的另一方面,一个或多个对象可在单独的窗口中选择和/或查看,以供用户可访问的任何数量的其它应用程序使用。例如,一个或多个对象可被选中用于修改或用于诸如超查看(hyper-viewing)等不同类型的查看。超查看可允许用户以非常迅速的方式滚动通过相对大量的对象,以收敛于感兴趣的特定对象。例如,在实践中,用户可能能够使用该超查看技术查看少至10个或多至10,000个对象。用户也可能能够容易地标志或标记感兴趣的或在超查看的特定点处的对象,以在稍后的时间集中于对象的一特定子集。
如上所述,对象依照基于时间的导航工具在区带内组织。例如,可沿屏幕的y轴,诸如以栈的形式创建多个区带。区带也可以相对于基于时间的导航工具来排列,以促进网络日志记录环境,在该环境中,用户的反馈或评论可表示对象,且由此可在相关的时间直接输入到区带中。
一般而言,所有可用区带或其至少一个子集的至少某些内容可同时在屏幕上查看。例如,内容可能不是可辨别的对象或缩略图,但是作为替代可以是一种指示符,该指示符通知用户在该指示符的地方存在某些对象。然而,当屏幕空间不准许所有期望的区带同时可见时,用户可简单地滚动(例如,垂直地)通过它们,使得当区带下降到屏幕的底部时,它可在屏幕的顶部重新出现。区带也可以基于如由年龄或用户偏好所确定的最后一次访问它的时间而从屏幕上移除。
每一区带可以按照从与包含在其中或由用户标识的对象相关联的元数据中提取的名称和/或一个或多个属性(例如,元数据)来定义。类似于常见的树结构视图,区带可以被折叠或扩展。然而,当被完全折叠时,关于每一区带的内容的某些信息仍可通过利用另一轴(例如,x轴)来获得。这部分地是通过监视和跟踪在任一区带内维护的对象的存在和/或密度来实现的。对于用户,该数据可以被表示为每一相应区带中的正弦曲线,由此,幅度和/或色彩不透明度可指示位于特定时间或时间段(例如,年、月、周、日、小时等)的对象的相对数量或对象的相对大小。或者,非正弦形状可表示对象密度。例如,可以采用三角形、椭圆曲线以及可以或不可以在数学上生成的图标。由此,即使群组被折叠或关闭,用户仍可通过结合时间参数利用密度指示符来从中提炼或提取信息。
依照本发明的另一方面,当对象彼此密切地相关时,它们尤其可被聚类。然而,由于其潜在的大尺寸(例如,在聚类中的对象数量的方面),聚类可见性可能取决于缩放深度而被阻碍。为解决这一情形,用户或系统可从聚类中智能地选择最能代表该聚类的一个对象来表示该聚类。其它对象可在该代表性对象“背后”找到,并可例如使用鼠标置于其上(mouse-over)和滚动操作来滚动通过。较重要的对象聚类可被给予特定标签,该特定标签可保留在屏幕上且在区带中可见,而无论缩放深度如何。通过简单地点击该标签,聚类可被可视化和放大以供更详细的查看。较不重要的聚类也可被标记出来,但是其分配的重要性级别将较低,且由此可被具有较高重要性值的聚类及其各自的标签重叠。
由于贯穿用户的个人时间线(例如,假期、工作事件、旅行等)的各时刻上的相对较高的对象密度,任一缩放深度的对象可见性可能是有问题的。由此,为优化对象的可见性,用户可对对象和/或对象聚类区分优先次序。例如,具有较低重要性值的对象或对象聚类的存在可由图标(例如,拖放箭头)或其它图形来指示,以示出在该特定时刻折叠的对象的数目。具有较高重要性值的对象可在到达适当的缩放深度时直接对用户可见。也可使重叠对象或聚类标签在某一程度上是透明的。允许部分地彼此重叠的对象和/或聚类的或其之间的某一程度的透明性对用户尤其有益。并非向用户隐藏可能重要的信息,而是该信息仍对用户可用。
上述本发明的各方面可支持各种对象类型,包括但不限于电子邮件、音乐、文档、照片、视频、电视和/或有线电视节目、计算应用程序、扫描的文档、网页或URL、超链接、语音消息、联系人、地址信息、地图、收条、交易记录、银行记录、和/或任何其它类型的数据。诸如跨时间段在区带内等区带的导航以及对象、区带或时间帧的放大和缩小可部分地通过采用各种音频命令、眼球跟踪或定位设备来实现。另外,通过缩放对较感兴趣的对象的查看还可通过例如允许较不感兴趣的周围对象按比例缩小并沿x轴迁移到屏幕的边缘来进一步优化。屏幕上的导航按钮也可协助在同一时刻一个特定区带内或跨多个区带的期望内容的可视化。
为实现上述和相关目的,此处结合以下描述和附图来描述本发明的某些说明性方面。然而,这些方面仅指示了其中可采用本发明的原理的各种方法中的几种,且本发明旨在包括所有这样的方面及其等效方面。当结合附图考虑以下本发明的详细描述时,本发明的其它优点和新颖特征将变得显而易见。
附图说明
图1是依照本发明的一方面的对象管理和导航系统的框图。
图2是依照本发明的另一方面的对象管理和导航系统的框图。
图3是依照本发明的又一方面示出示例性对象管理和导航系统中对象的组织的框图。
图4是依照本发明的再一方面示出从图3所得的对象组织的框图。
图5是依照本发明的一方面的对象管理和导航系统的框图。
图6是依照本发明的一方面示出x、y和z轴的示例性定义的图。
图7是依照本发明的一方面示出图5的对象密度跟踪组件的操作的框图。
图8-10是依照本发明的一方面示出至少一个区带的打开的示意图。
图11-14是依照本发明的一方面示出至少一个区带的打开中所涉及的顺序的示例性用户界面的屏幕图。
图15是依照本发明的一方面示出区带的放大的示例性用户界面的框图。
图16是依照本发明的一方面可以结合图1、2和5的对象导航和管理系统使用的对象管理系统的框图。
图17是依照本发明的一方面示出区带上相对压缩的多个聚类标签的示例性用户界面的屏幕图。
图18-19是依照本发明的一方面示出在聚类标签上点击然后从该视图缩小的示例性用户界面的屏幕图。
图20是依照本发明的一方面示出对象和/或聚类标签的透明度和重叠的示例性用户界面的屏幕图。
图21是依照本发明的一方面便于对象选择和所选择对象的查看的对象导航和管理系统的框图。
图22-27是依照本发明的一方面示出各种对象选择技术的示例性用户界面的屏幕图。
图28是依照本发明的一方面便于找出对象和查看找到的对象的对象导航和管理系统的框图。
图29-30是依照本发明的一方面示出找出操作的示例性用户界面的屏幕图。
图31是依照本发明的一方面便于过滤对象的对象导航和管理系统的框图。
图32是依照本发明的一方面示出过滤菜单和区带组织的示例性用户界面的屏幕图。
图33是依照本发明的一方面示出从传统树结构到独特的基于时间的区带结构的转换的示意图。
图34是依照本发明的一方面示出可选色彩方案的示例性用户界面的屏幕图。
图35是依照本发明的一方面示出在任一对象或区带级可用的弹出菜单的示例性用户界面的屏幕图。
图36是依照本发明的一方面示出便于导航和管理以基于时间的区带结构排列的多个对象的示例性方法的流程图。
图37是依照本发明的一方面示出便于注释和聚集对象的示例性方法的流程图。
图38是依照本发明的一方面示出便于区带导航的示例性方法的流程图。
图39是依照本发明的一方面示出便于区带导航的示例性方法的流程图。
图40是依照本发明的一方面便于对象和区带的基于时间的导航的示例性方法的流程图。
图41示出了用于实现本发明的各方面的示例性环境。
具体实施方式
现在将参考附图来描述本发明,所有附图中,相同的参考标号用于指相同的元素。在以下描述中,为解释起见,陈述了各种具体细节以提供对本发明的透彻理解。然而,很明显,本发明可以不采用这些具体细节来实施。在其它情况下,以框图的形式示出公知的结构和设备以便于描述本发明。
如本申请中所使用的,术语“组件”和“系统”指的是计算机相关的实体,或者是硬件、硬件和软件的组合、软件、或者是执行中的软件。例如,组件可以是,但不限于,运行在处理器上的进程、处理器、对象、可执行码、执行的线程、程序,和计算机。作为说明,运行在服务器上的应用程序和服务器都可以是组件。一个或多个组件可驻留在进程和/或执行线程中,并且组件可位于一个计算机上和/或在两个或多个计算机之间分布。
一般而言,本发明可包含与当对象被引入一个或多个区带中时注释它们有关的各种推断方案和/或技术。另外,各种推断方案可被应用于或用于部分地基于以下的任一个来分组或找出相关的对象:相似的元数据、相似的图像(例如,通过图像识别技术)、相似的脸部(例如,通过脸部识别技术)、相似的手写体(例如,通过手写体识别)、相似的文本(例如,通过光学字符识别)、相似的水印、和/或相似的音频模式(例如,通过音频加指纹、音频—文本、和/或音频—乐谱识别算法)。应当理解,前一列表不是穷尽的,且可考虑其它相似性。
如此处所使用的,术语“推断”一般指从一组通过事件和/或数据捕捉的观察中推出或推断系统、环境和/或用户的状态的过程。例如,推断可用于标识特定的上下文或行动,或可生成状态的概率分布。推断可以是概率性的—即,基于数据和事件的考虑计算感兴趣的状态的概率分布。推断也可以指用于从一组事件和/或数据组成更高级事件的技术。这类推断导致从一组观察的事件和/或储存的事件数据构造新的事件或行动,无论事件是否在相邻的时间上相关,也无论事件和数据是否来自一个或若干个事件和数据源。
现在参考图1,依照本发明的一方面示出了便于各种类型的对象(数据)的导航和管理的独特且强大的系统100的概括框图。系统100包括可视化组件110,它可访问和/或检索数据存储120中维护的对象,并可至少部分地基于与其相关联的用户定义的属性或元数据按照主题和时间来可视地排列它们。可视化组件110可依照对象属性或元数据之间的相似性或共同性将对象组织成任意数量的区带。例如,每一区带可表示一个特定的主体(例如,家庭、房子、旅行等)。
在每一区带内,可视化组件110可依照基于时间的参数组织或定位相应区带中的一个或多个对象。基于时间的参数可对应于对象的创建日期或对象中所表示的事件发生的日期/时间。例如,7月4日去岛上的旅行的照片可被组合在一个区带中(例如,名为旅行),且定位在2004年7月3-5日(旅行日期)周围。类似地,几个月后在感恩节假期的用户旅行可被定位在适当的十一月份日期周围。
区带及其对应的对象可以在显示器130上由用户查看和/或操纵。如下所述,包括在每一区带内的对象可用各种方式来表示,以保持用户知道其在各自区带内的存在,同时也优化用户的感兴趣对象的可见性。
系统100也可包括浏览组件140,它允许用户更容易地浏览对象区带以建立或发现任意区带内或跨多个区带的对象之间的附加关系或关联。从浏览组件所得的任何这样的关联也可在显示器130上按用户确定的各种方式来显示。
现在参考图2,依照本发明的一方面示出了促进对象的管理和导航的新颖方法的系统200的框图。系统200包括可视化组件210,它接收诸如一个或多个对象等基于用户的输入,以在它们可通过基于时间的导航组件220来浏览之前管理和处理它们。
具体地,可视化组件210可包括多个子组件,诸如注释组件230。注释组件230可基于与区带或组相关联的元数据以及显式用户输入注释新引入到对象区带或组中的任何对象。一般而言,注释可以是用户或机器应用于对象的修改,该注释进一步给予对象意义、上下文、丰富性、以及增强原始对象的智能、物理或情感值的细节。例如,用户可通过给予对象名称或标题或通过向对象分配时间或日期来特别地注释对象。注释也可以是关于对象或区带的用户评论的形式。用于注释区带的评论或其它信息也可被自动用于注释位于该区带内的每一对象或对象组。
可视化组件210中还包括关联组件240。关联组件可关联例如区带内具有相似元数据或具有相似元数据的最小阈值的对象。结果,这些相关的对象可由特定区带标识为区带内更密切相关的对象的聚类。关联也可跨多个区带来执行,以找出存储在不同区带中的相关对象。
基于时间的导航组件220还可促进依照时间参数在显示器250上向用户可视化对象。更具体地,基于时间的导航组件220允许用户依照诸如年代、一年、月、周、日、小时、十年、和/或其它有用的时间分割同时在任一区带内或跨一个以上区带导航对象。由此,通过简单地跨可视时间线表示任何特定的区带(诸如通过使用定位设备、滚动机制或其它姿势滚动机制),用户可在对象在用户的生命中发生时容易且迅速地查看它们。例如,想象用户使用系统200来维护20年来(从10年前开始并在从现在开始的10年后结束)他/她生命中的时间的日志或日记。用户可能期望包括关于已进行或计划的任何假期的照片、旅行路线、地图和游览胜地、一般家庭照片、诸如医生收据和检查结果等宠物信息、一般房子信息、歌曲、录音、捕捉的音频剪辑、联系信息、地址、GPS坐标、文档等。信息的类型实际上是无止境的。
诸如照片、收据或任何其它类型的文档等对象由用户添加,它们可被注释并关联到适当的区带中。当然,区带可以被相应地命名为“宠物”、“假期”、“家庭”、“朋友”、“工作”、“家”、“学校”、“兴趣”、“音乐”、“项目”等,以正确地标识主题。
以下若干附图提供了关于基于时间参数将对象组织成区带及其导航的进一步细节。例如,图3和4示意性地表示了将对象添加到任一区带。在图3中,假定用户具有他/她希望在这一可导航空间中管理的多个对象300。对象300与区带选择组件310交互,该组件能够基于对象本身和与其相关联的任何元数据确定将相应的对象300放置在哪一区带中。区带选择过程可使用人工智能(例如,算法、推断方案等)以自动化的方式隐式地发生,或通过显式用户输入手动发生。之后,可采用基于时间的导航组件320来回移动任何期望的区带内的对象,以查看期望日期或时间范围内的对象内容。
应当理解,新区带可被创建、删除、移至屏幕空间上的不同位置、以及重新排序,使得通过拖动区带,某些区带可彼此相邻地出现(例如,字母顺序、按照创建日期或修改日期的时间顺序等)。类似地,对象可通过拖动或通过采用其它合适的命令或选项来执行期望的操作,由用户随意地容易地移至或复制到不同的区带。
图4示出了图3的动作的结果。如可以见到的,时间参数400(例如,月份和年份基准)在基于时间的导航条410上指示。另外,对象与其各自的区带相关联,并在其各自的日期处沿该区带定位。如将在下文图5中讨论的,区带和其中的对象可以取决于用户偏好在许多缩放级别或深度查看。由此,如图4所示,此处所描述的对象可以对用户可见或可以不对用户可见。
现在转向图5,依照本发明的一方面示出了进一步促进使用独特的用户界面的对象管理和导航的系统500的框图。系统500类似于上文图2中的系统200。然而,另外,可视化组件510还包括缩放组件520和对象密度跟踪组件530,其每一个协助区带内容和/或其中的特定对象的可查看性。
缩放组件可具有双重功能。在一个方面,缩放组件520可便于沿x轴缩放。具体地,缩放组件520可诸如通过使用带有滚轮的鼠标上的鼠标滚轮以各种缩放深度放大或缩小x轴参数(例如,时间)。例如,向下运动缩小到屏幕上显示的更大的时间范围,且由此显示每一区带或对象的较少可见细节。同样,滚轮的向上运动缩放(例如,放大)到更具体的时间帧,由此允许该时间帧中一个或多个区带或对象的更详细视图。缩放也可通过可包括在工具条中的导航按钮(例如,D—日、W—周、M—月、Y—年、3年等)或通过位于每一区带上的“-”和“+”指示符(见下文图17-19)来实现。
在另一方面,缩放组件520可便于沿y轴缩放。更具体地,缩放组件520可放大或缩小区带以本质上扩展或折叠区带。例如,在垂直维度上打开区带以查看其中的任何对象可通过点击并向下拖动区带的下半部分,或通过向上拖动区带的上半部分来实现。由此,可能保持区带的上半或下半部分被压缩以在查看区带的两个部分中的另一个(例如,上半或下半部分)时提供更多的屏幕空间。为同时扩展上半和下半部分,定义上半和下半部分的时间条可以用向上运动来抓取。为同时关闭两个部分,可用向下运动(使用定位设备)来抓取时间条。
此外,当具体地查看一个区带(区带A)时,如果用户用焦点或通过拖动调整区带A的大小,则其它区带的y轴维度可被自动缩减。一般而言,当区带被打开得越来越宽时,对应的对象可变得越来越大,使得可看到每一对象的更多细节。由于屏幕空间是有限的,因此任何其它区带可变得越来越压缩以为一个区带的扩展留出空间。可替换地或除此之外,可通过调用被指派为记住当前缩放设置的功能键或自动缩放键,可将所有区带分配给相同的宽度。为进一步节省宝贵的屏幕空间,也可使区带自动隐藏或临时从屏幕上消失,以便于在任何这样的区带不在使用中时创建桌面空间。
为向显示屏幕上系统500的空间利用和体系布局提供进一步的上下文,图6示出了每一轴的示例性表示。例如,区带可沿y轴排列,由此在任一时刻示出的每一区带的量可以取决于给定任一区带的特定缩放深度以及用户期望在屏幕上查看的区带数目时的总可用屏幕空间。缩放深度可以在z轴上表示,因为当在特定区带上或区带内的时间上缩放时,感兴趣的对象放大,且不感兴趣的周围对象可能看起来在大小上相对于放大的对象而减小。此外,某些对象可能变得对用户更重要(例如,给定可见性方面的高重要性值)。由此,当一般查看区带内的对象时,可以使得某些对象呈现为看起来至少部分地在较不重要的对象前面。
当在各种细节级别导航区带时,系统500或用户可使用一个或多个选择算法来确定查看哪一内容。一种形式的选择算法依赖于以下:每一区带可由具有多个固定节点的树类型结构构成。该树可以是稀疏的,意味着并非所有的节点都被或必须被填充。向上或向下移动树也是可能的。
沿树向上的每一节点包含其下的节点的概要,这意味着当用户缩小区带时,例如缩放组件可在某一级别走过这些节点而无需处理其下方的每一节点。即,可依赖于每一节点的概要,而非执行处理其下方的所有每一节点的更耗时的任务。当越过每一节点的设置的阈值时,缩放组件可向上或向下移动该节点,取决于所越过的阈值是属于上方还是下方的节点。此外,每一概要可指示重要性级别,并可包括一组属性。重要性可基于显式输入的属性或部分地通过基于启发式的属性。例如,所检测到的点击次数可以提高节点中的特定项的重要性。此外,概要可以如用户或系统参数所确定是动态或静态的。
取决于其中采用系统500的应用,轴可以被改变。例如,在网络日志记录环境中,时间参数可以在y轴上表示,且注释可以由用户在特定的时刻或日期作出,所有这些如上所述都可以是可按比例缩放、可浏览和/或可缩放的。
再次参考图5,对象密度跟踪组件530提供了对屏幕上每一区带的唯一峰值。具体地,当区带至少部分地被压缩使得个别对象不再可见时,用户仍可从区带中提取信息,诸如位于特定时间或特定时间段上的对象的相对数量。另外,用户可能能够确定对象在区带内的任何给定时刻使用的相对大小或存储消耗。这些属性都可部分地由对象密度跟踪组件530来实现。对象密度跟踪组件本质上度量以下的至少一个:整个区带中定位的对象的数目或区带中每一对象的相对大小。通过将度量转换成相应区带中的代表性正弦曲线,用户可快速地评估每一区带的状态。
例如,图7示意性地示出了可指示每一区带的任一特定时刻的对象密度的相对高度和/或色彩强度。如图所示,跟踪组件700跟踪每一区带710的每一对象的时间位置或定位。基于时间的导航条720可保持在屏幕上,且沿着区带710放置以提供简单且准确的基准帧。当区带在屏幕上时,用户可容易地确定,基于正弦曲线730的高度(或某一其它函数导出的形状),某些数量的对象存在于年、月、日、小时或周的特定时刻,取决于x轴的参数。结果,用户可评估其生命中特定时刻或时间段的活动级别等。此外,包括在每一区带中的内容本质上从不从视图中消失,除非用户修改区带设置。即,某些上下文可以在区带的任何缩放深度处看到。
继续到图8-10,相对于至少一个区带示出了打开或扩展操作。从图8开始,示出了排列在栈中(例如,沿用户界面的y轴)的多个可定义区带810的图示800。跨区带栈的顶部,可以找到时间轴820。时间轴820便于每一区带内以及多个区带之间的导航。在这一情形中,时间轴被设为在月份的基础上查看区带。如图8所示,区带810被压缩,由此包含在任一区带内的各个对象可能对用户是不可见的。
在图9中,用户放大或打开区带1900,结果,现在有两个对象910可见。锚920提供了对对象沿时间轴820落在其上的日期的引用。作为区带1900的扩展的结果,屏幕上的其它区带930变得更小。
在图10中,用户继续扩展区带1900,并从中得到区带11000。如可以见到的,区带11000的高度实质上且因此增加,对象1010(例如,图9中的910)的大小或尺寸也增加。因此,用户可查看关于对象1010的更多细节;然而,细节的增加可取决于当前时间段内(例如,2004年9月-2005年5月)区带中的其它对象的数目。另外,更密集地压缩的对象可被展开并出现在屏幕上。由于对象响应于区带扩展的移动并由于附加对象的可能展示,锚1020的位置可以改变以补偿空间消耗的改变。
图8-10中发生的事件可以通过图11-14中所示的屏幕捕捉图像来更好地可视化。屏幕捕捉图像表示利用上文所讨论的系统和技术的一个示例性用户界面。在图11中,多个区带1100被排列在栈中。区带被命名并以各种颜色出现,以容易地将不同的区带彼此区分。跨越栈的顶部有一基于时间的导航条1110。
区带1100以压缩的状态出现;然而,依照时间参数(例如,年份:1999-2003)的每一区带内对象的密度和/或存在由适当的正弦曲线来表示。例如,曲线越透明,就指示更少对象位于那里。类似地,曲线越不透明,就指示区带内特定时间/日期段的越密集填充的区域。
可替换地或除此之外,曲线的高度可指示区带的一个部分的填充程度有多密集地。例如,相对较矮的曲线可指示较少的对象,而相对较高的曲线可指示较大数量的对象。最后,可以看到每一区带的上半部分1120和下半部分1130由沿x轴划分每一区带的条1140来界定。该条1140可诸如通过担当时间基准或通过镜像导航条1110的时间状态来镜像基于时间的导航条1110的功能。该条也可用于扩展或压缩区带。即,当该条在向上运动中被抓取时,扩展区带的上半和下半部分。当该条用向下运动抓取时,发生相反的情况。
从图11,图12-14示出了称为“Pictures(照片)”的区带的“打开”顺序。在图12中,大小上相对较小的多个对象现在在区带的上半和下半部分中都可见。区带中的正弦曲线逐渐从视图中消失。
在图13中,当区带继续“打开”或扩展时,可见到更多对象。可见到给予每一对象的名称或标题,但可关闭这些名称或标题以增加区带内的可用屏幕空间并优化对象可见性。正弦曲线继续从视图中消失。
在图14中,Pictures区带被完全打开。为查看1999年1月之前或2003年1月之后的对象,用户可诸如通过使用定位设备(例如,鼠标)抓取该区带并将其移动到右侧或左侧来导航到其它年份或月份。在区带的这一扩展视图中,区带条1400镜像基于时间的导航条1410上指示的月份。另外,区带条1400包括在相对日期处的标记,以指示可见对象实际上“存在于”时间的何处(沿时间线(1410))。屏幕上的其它区带被进一步压缩以为Pictures区带的扩展留出空间。
图15示出了Pictures区带的放大。放大可以通过在使用带有滚轮的鼠标时将鼠标滚轮向上运动来实现。在区带上放大以查看特定日期/时间处特定的一个或一组对象也可部分地通过选择和/或点击区带内的条1500来实现。在这一示例性屏幕图中,条1500反映了比基于时间的导航条1510更多的时间细节。
现在转向图16,依照本发明的一方面示出了对象管理系统1600的框图。系统1600可结合上文分别参考图1和5讨论的系统100或500来使用。更具体地,对象管理系统1600可便于对象在其各自的区带内的组织和可见性。一般而言,对象管理系统1600可接收一个或多个对象1610,并通过各种组件可产生经注释和/或聚集的对象。结果,对象可被容易地浏览和/或定位。
对象管理系统1600包括注释组件1620,其中包括标识组件1630和识别组件1640。注释组件1620可依照如由标识组件1630标识的其名称或属性来注释对象。另外,注释组件1620可依照通过采用识别组件1640识别的任何特征来注释对象。例如,想象经受注释的对象是用户的姐姐Mary的照片。在不需要显式用户输入的情况下,识别组件1640可采用面部或模式识别子组件(未示出)来准确地将照片中的人标识为Mary,并相应地注释该照片对象。识别组件1640也可利用光学字符识别和声音识别。
紧密相关的对象可由聚集组件1650聚集在一起。聚集组件1650也可用于将对象之一标识为最能代表聚类。由此,当屏幕或区带空间被局限或限制时,代表性对象可用于向用户标识聚类。或者,可分析与聚类的对象相关联的元数据,并使用描述该聚类的最相关或最有代表性的元数据来标识该聚类。例如,对象聚类可由聚类标记组件1660给予标签。聚类标签即使在区带被压缩时也可保持可见和易读。为查看或放大聚类以看到其中的对象,用户可点击该标签至少一次。
人工智能组件1670可结合对象管理系统1600使用来自动且可能更有效地注释对象和/或聚集紧密相关的对象。对象的专家注释和聚集可协助多个区带内或跨多个区带的对象的浏览和定位。
以下图17-20进一步示出了系统1600的操作。在图17中,可在区带中依照其在时间中的出现看到多个聚类标签1700。类似于个别的对象,对象聚类可由用户分配优先级或不同的重要性级别。由此,较重要的聚类的标签可能重叠,并看起来部分地遮挡位于相对较近距离的其它较不重要的聚类的视图。作为示例,聚类标签1710被假定为对用户而言比聚类标签1720有更高的重要性,而聚类标签1720比聚类标签1730更重要。允许聚类标签之间以及区带内的对象之间必要的重叠便于向用户提供更多信息,而非允许较不重要的对象或聚类从视图中完全消失。
现在假定用户希望查看聚类1740(标记为RAMROD 2003)中的对象。为实现这一目标,用户可点击标签1740。这使得相应的Cycling(骑车)区带1750打开以使聚类1740中的对象可见。图18的屏幕图示出了最终结果:聚类1740中的对象1800(以及重要的元数据:例如,标题、日期)是可见的,而屏幕上的其它区带1810由于区带之间的屏幕空间分配的改变而被实质上压缩。
特定聚类内的某些对象可由用户压缩。因此,当打开聚类时,这几个对象可保持关闭,但是如由图标1820所指示的,其存在并没有被忘记。图标1820指示给定当前缩放级别,该区域中的s个对象(例如,s=1)由于空间约束而不能被显示—这是由于例如分配给这些对象的重要性级别。
当用户从聚类1740中缩小时,可如图19中所示的查看位于聚类1740周围的附加对象。应当注意,区带右侧的导航按钮可便于快速将该区带压缩(“x”)至其最小高度或逐渐地减少扩展(“-”)或压缩(“+”)的量。
最后,在图20中,再一次示出了对象或聚类标签的重叠和透明度的概念。如可以见到的(例如,在2000和2010),在屏幕图中,聚类标签和/或对象可被设为彼此重叠,但是通过这样做,使用透明度级别使得涉及后面的对象的信息不完全丢失或对用户隐藏。由此,当管理区带内的上百或上千个对象时,透视、洞察和/或相关性并未被认为更重要的对象完全损害。即,用户可保留他/她的对象以及彼此的关系和关联的更完整描绘。
现在参考图21,示出了可结合上文讨论的系统100、200和/或500(图1、2和5)采用的导航和选择系统2100的框图。系统2100可以用于便于导航和查看位于一个或多个区带内的感兴趣的对象。系统2100包括基于时间的导航组件2110,它允许用户导航一个或多个区带内的多个对象。对象与时间参数相关联,由此当用户选择期望的时间参数时,与其相对应的不同对象可被查看或显示。具体地,可使用对象选择组件2120选择一个或多个对象用于更深入的查看。选择对象来查看可基于期望的时间参数(例如,特定的周或日),或可由当前可见的对象来确定。
当选择多个对象用于更详细地查看或用于另一应用程序或操作时,多对象查看器2130可以按期望的方式(例如,按照日期以时间顺序)排列所选择的对象用于在显示器2140上查看。一个或多个查看参数2150可被设置或调整以定制显示器上对象的外观。例如,可修改对象的色调和查看大小、可打开或关闭标题、可调整查看对象的速度、可改变一次查看的对象的数目等等。
如上所述,选择对象用于更深入的查看可部分地通过多种不同的选择技术来实现。例如,图22示出了可通过点击对象来执行的一个对象的选择。放大的对象2200可用或不用扩展的窗口2210来显示,该窗口显示了“相关项(Related Items)”以及“其它内容(Other Stuff)”和导航箭头。对象2200本身可显示诸如其标题、对象的存储位置(例如,路径名)、大小和/或分辨率等选择元数据。
或者,对象的选择可通过选择沿区带内或区带栈上方的基于时间的导航条的时间帧来进行。图23示出了区带2300内的多个对象,其中,区带2300被扩展,且该区带沿时间轴2310(例如,基于时间的导航条)放大。对象查看器2320由用户打开,但是此时保持为空。
在图24之后,用户选择了区带2420内时间条2410上的时间段2400。在这一选择之后,落入该时间段2400内的对象被加亮2430,且出现在对象查看器的对象列表2440部分中。对象查看器显示窗口2450仅将选中的对象显示为对象列表2440中的顺序。然而,顺序和根据哪一字段被给予优先级而改变。例如,对象列表可按照标题或按照日期或按照重要性级别来排序。其它排序选项也可以是可用的。选中的对象可以用可调整的速度在查看窗口2450中“播放”。
图25示出了对象的选择也可通过选择沿基于时间的导航条2510的时间段2500用于在对象查看器显示窗口2520中单独查看来作出。
图26和27表示对图25中查看所选择的对象的轻微改变。在图26中,作出对时间线头部2600中的范围的选择。默认地,时间线头部2600可以是时间范围缩放工具。实际上,例如,用户通过在时间线上拖动鼠标来选择时间范围,并且当鼠标按钮被释放时,视图变为由时间线的起始和完成时间所度量的时间范围。如果在此操作期间CTRL(或其它分配的)键被按住,则所有当前可见的区带中所选择的时间范围内的所有对象都被选中。该动作然后可导致对象在如2700所示的另一窗口中显示。该行为允许访问给定时间范围内要显示的所有对象,而无论引用它们的是哪一特定区带。
在图27中,对象2710的布局可如所需地改变以修改一次查看的对象的数目。由于窗口2700中的空间是有限的,且一次显示所有对象2700,因此仅对每一对象显示最相关的数据。用户或系统可确定什么有资格成为最相关的数据,且当查看空间有限时按照重要性来对各种元数据分级。
现在转向图28,示出了便于使用基于时间的用户界面找出相关联的对象并查看和管理它们的系统2800的框图。系统2800类似于上文图1中的系统100(图2的系统200;图5的系统500)。然而,系统2800包括查找组件2810,它依照提供的查找项从已注释的数据存储2820中定位对象,然后在新且完全可操作的区带中显示它们。更具体地,查找组件仔细检查储存在数据存储中的对象的元数据,并提取具有匹配查找项的元数据的那些对象。图29和30包括示出查找操作的屏幕图。
从图29开始,显示了示例性查找窗口2900。如可以在窗口2900中见到的,用户可选择至少一个其它查找参数以获取除查找项以外的他/她所期望的结果。图30描绘了屏幕上引入的名为“Search Results(搜索结果)”的新区带3000。由查找组件找到的对象依照与其相关联的时间参数排列在区带中。与任何区带及其各自的对象一样,该区带和/或其对象也可以用被修改、保存(用更有描述性的名称)、移动、删除和/或用户所期望的任何其它方式操纵。此外,区带中的对象保留它们在其它区带中分配的同样的属性,它们可与其它区带相关联或用其它区带来维护。例如,可见性优先级保持实施。由此,某些对象(3010)即使在搜索结果区带中也可被压缩。最后,例如,涉及查找项的附加元数据可被用于注释各自的对象,作为查找操作的一部分的结果。
转向图31,示出了至少类似于图1的系统100(以及图2的系统200;图5的系统500)的系统3100的框图,但是该系统结合了过滤组件3110。过滤组件3110可从当前的屏幕上视图中移除不合需要的对象或区带。例如,在区带的密集填充区域,用户可能只对看到文档感兴趣,而非照片和网页链接。可替换地或除此之外,用户可能仅希望看到涉及诸如食品、聚会或汽车等某些主题的对象。在任一情况下,过滤组件3110滤除不合需要的对象,以仅留下期望的对象对用户可见。每一区带可具有其自己的“个人”过滤器,这些“个人”过滤器具有如图32所示的对区带专用的关键词。总体上,过滤器的使用可很大程度上改进区带和/或对象的浏览体验,并使得用户的体验或与其对象的交互更有意义。
图32进一步示出了区带也可以是替换的用户界面,它与经典的“树视图”组织3200相邻地显示,以提供对一组对象的同时双重视图。可看到对象按字母顺序排列在树控件(表示其存储层次)中,并在树控件旁边具有基于时间的“区带”布局。具体地,每一区带至少部分地依照时间参数来组织,但是也维持某一分层组织,该分层组织可在更传统的树视图结构中可视化。例如,区带名可表示主节点,且可填充从该主节点向下分支的任意数量的子节点。由此,用户可依照例如基于时间和/或重要性的关联和关系来查看区带内和跨区带的对象;并且在任一时刻,也可查看替代地在文件夹—子文件夹视图中组织的对象,其中具有实质上较少的、给予维护在每一文件夹或子文件夹中的对象的上下文。
图33提供了从传统的树结构3300到如上文在图1-32中讨论的更动态、更具交互性以及更能提供信息的基于时间的区带结构3310的强大转换的示意性表示。该示意性表示强调了这一事实,即包含在任何特定文件夹3320中的对象本质上被隐藏不被查看,除非打开该文件夹。然而,通过打开文件夹,围绕该文件夹的上下文丢失,诸如该文件夹是在何处相对于其它文件夹来定位的。同样,树结构不能传达文件夹或子文件夹和/或其中包含的对象之间的关系。
相反,基于时间的区带结构定义了被分成独立的区带的主节点以及包含在该主区带(例如,Pictures)中的任何对象(即使是在“子文件夹中”(例如,Pets))可相对于包含在其中的其它对象来查看。在基于时间的区带结构3310中,对象可按照时间参数以及基于其与同一区带中的其它对象的密切关系(例如,聚类)来组织。不仅可以识别每一区带内的对象的关系和关联,而且也可识别或发现跨多个区带的对象的关联。遗憾的是,常规的树结构不能独立地提供这一有意义的信息。因此,树视图可与区带视图同时显示,以提供从两个不同视角的同一对象的“描绘”。一个视图中的任何编辑或改变可以立即在另一视图中可见。两者的同时(例如,并排)视图对于在检查时间线上或沿时间线的相关对象的对象上下文的同时可视化实际存储路径也是有用的。或者,视图可在一个视图和另一个视图之间来回切换,尤其是当一个视图与另一视图相比较佳或两者并不是用户同时所需的时候。
要注意的几个其它性质包括区带可以依照用户的偏好来用色彩定制的事实。例如,图34所示的示例性用户界面的屏幕图指示了与先前在许多之前的屏幕图中所示的非常不同的色彩方案。
在每一区带内且在每一对象处,可在屏幕上引发或弹出向用户提供对该对象或区带采取的若干不同选项或动作的菜单一取决于何处访问该菜单(例如,在对象上或在区带空间上)。图35示出了具有多个选项和动作的示例性弹出菜单3500。应当理解,该列表不是穷尽的,也可包括其它选项或动作。
下文将通过一系列动作来描述依照本发明的各种方法。可以理解和明白,本发明不被动作的顺序所限制,因为依照本发明,某些动作可以按不同的顺序和/或与此处所示和描述的其它动作同时发生。例如,本领域的技术人员可以理解和明白,方法可替换地被表示为诸如状态图中一系列相关的状态或事件。此外,并非所有示出的动作都是实现依照本发明的方法所必需的。
现在参考图36,示出了便于至少部分地基于时间参数在对象之间管理和导航的示例性过程3600的流程图。对象可基于例如主题被组织成可定义的区带。可以回想,在屏幕上向用户显示的区带可以是对应文件或文档的ASCII缩略图。缩略图可以是可动作且动态的,由此可在由于修改或更新而引起对象的状态改变时改变。
另外,用户可通过选择和/或点击缩略图来修改相应文件的内容。即,用户可注释文件或向文件直接添加文本或评论,而无需打开独立的应用程序来这样做。例如,文字处理文档可在不打开文字处理程序然后从其中访问文档的情况下被更新。相反,用户可仅仅将光标移至文档上的相关线或区域,并开始向文档输入新数据。此外,任何修改也可被保存—减轻了在若干不同的应用程序和区带之间跳跃的需求。由此,可实质上提高用户管理和查看文件、文档、照片、网页等的效率和总体验。
过程3600涉及在3610用相关对象填充一个或多个区带。对象可包括诸如文档、报告、图片、演出/节目、声音或音频、网页、超链接、音乐等项。在3620,对象可基于诸如与每一对象相关联的日期或时间等时间参数在各自的区带内组织。每一对象的时间参数可以从对象的元数据提取或由用户显式输入。
在3630,可使用基于时间的导航条来浏览对象和/或区带。基于时间的导航条促进了哪一时间范围当前可在屏幕上查看。用户可通过使用定位设备例如点击、按住和滚动来沿导航条滚动以导航到不同的时间范围。另外,用户可通过在任何区带上在相对方向上(例如,向左或向右)移动定位设备来导航到不同的时间范围。当时间范围在屏幕上改变时,区带的视图也改变,以与当前时间范围协调。可以想象,移进和移出区带以及沿时间线导航条移动通过各种时间段实际上是相当流畅且不费力的。
现在参考图37,示出了便于被分类成任意数量的区带的对象的管理和导航的示例性过程3700的流程图。当管理在任何时间段上获取和收集的诸如文件、照片和其它文档(例如,专业或个人对象)等对象时,与每一对象相关联的元数据对于提高诸如排序对象、查找对象、组合对象和/或发现对象之间的关联等的效率可能是重要的。由此,依照过程3700,对象可以在3710用诸如它所位于的区带的名称、时间参数(例如,时间或日期)以及其它用户输入等元数据来注释。例如,用户可标识对象的特定主题并相应地注释该对象。任一对象可以位于一个以上区带中;由此,对于对象或其元数据作出的修改或更新也可当在另一区带中查看时在对象中反映。简言之,对象的多个副本本质上彼此链接。注释可通过文本、笔或语音来作出。
另外,可在3720为每一对象设置重要性值或级别。重要性级别可以是用于指示当屏幕空间有限且对象在区带的密集填充区域中时对象的可见性程度的另一种形式的元数据。例如,想象区带内的可查看空间被几十或几百个对象塞满—这可能是由于当前的缩放级别或仅部分扩展的区带。由于可用的查看空间有限,因此可选择较重要的对象并因此使其对用户可见。被认为是较不重要的对象可被压缩,但是并不完全从视图中隐藏。可使用图标或符号来指示Q个对象(例如,1或5等)存在于区带中的相关时间或日期处。为查看这些压缩的对象,用户可简单地进一步放大直到有足够的空间变得可用来显示这些对象(例如,基于对象的重要性)或可直接在图标上点击。
在某些情况下,某些对象可以如此密切地相关,以致于用户可能希望将它们聚集成区带内的子组。该过程也可被设置为使用人工智能和/或任意数量的推断方案以自动化但智能的方式来完成。因此,在3730,密切相关的对象可被聚集且可任选地标记。每一聚类可被分配重要性级别或值。对于聚类,聚类标签可在即使区带被压缩且不能看到清楚的对象时也能够保持可见。由于在相近或相同的时间处可找到一个以上标记的聚类是可行的,因此具有较高优先级的标签或聚类可覆盖具有较低优先级的标签或聚类。聚类标签也可以透明的方式与其它对象重叠,使得对象和标签的至少一部分仍可被识别且可被辨别。最后,在3740,可再次通过使用基于时间的导航条(例如,时间线工具)来浏览对象和/或区带。
现在转向图38,依照本发明的一方面示出了示例性区带导航过程3800的流程图。区带导航过程3800涉及诸如打开(扩展)或关闭(压缩)区带等操作。在3810,使用定位设备,用户可用向上运动抓取区带内的时间条以打开整个区带(例如,上半部分和下半部分)。或者在3820,用户可能期望仅打开区带的上半部分。为此,用户可点击并向上拖动上半部分的区域。下半部分(条下方)保持原样且不受影响。
另一方面,用户可能希望仅扩展区带的下半部分。由此,在3830,通过点击并向下拖动下半部分的任何区域,来仅扩展下半部分。再一次,上半部分保持原样且不受影响。在3840,某些用户可能希望使用位于显示器上的其它导航按钮或工具来扩展或压缩或以其它方式导航区带(3840)。
区带也可被固定到其位置,使得当用户滚动通过区带时(例如,垂直滚动使得不同的区带可出现在区带栈的顶部)它们不受影响。然而,可替换地,用户可能希望将区带移至显示器上不同的位置—可能远离任何其它区带。这可部分地通过点击、按住然后拖动或抛出(用姿势表示)该区带至其期望的位置(3850)和/或创建新窗口来查看并导航该区带来完成。
现在参考图39,依照本发明的一方面示出了示例性对象选择和导航过程3900的流程图。过程3900涉及用于促进区带内维护的对象的导航和管理的各种技术。在3910,区带可被扩展以展示至少一个对象并使其可见。当对象聚类被压缩并且仅标签可见时,用户可点击标签以在聚类上执行放大动作(3920)。
在某一时刻,用户可能希望更详细地查看感兴趣的一个或多个对象或在对象上执行其它操作。为选择一个或多个对象,用户可加亮期望的对象并点击围绕该对象的加亮框。结果,所选择的对象可在独立的窗口中查看。出现在独立窗口中的对象也可显示诸如与特定对象有关的其它对象以及与每一选中的对象相关联的最相关元数据(例如,名称、文件大小、路径名等)等附加信息。也可给予用户作为电影或幻灯片演示来查看选中对象的选项,其中演示的速度可由用户调整。
尽管图中未示出,可采用其它导航技术来增强或优化对象的可见性,尤其是用户感兴趣的对象的可见性。例如,每一区带可利用至少一个过滤器。通过使用一组确定的关键词或元数据项,用户可例如按照对象的类型或按照对象的主题将对象过滤到视图之外。这可使得更多空间可用于查看感兴趣的对象,并减轻区带中的拥塞或区带的聚集视图。在某些情况下,感兴趣的对象可在若干区带中分布或散布。用户可通过使用查找命令来定位它们。对应的结果可在新区带中被可视化。与任何其它区带一样,该区带可被保存、移动和/或删除。
现在转向图40,示出了可结合依照本发明的一方面的对象和/或区带使用的示例性的基于时间的导航过程4000的流程图。过程4000涉及在4010为基于时间的导航条选择查看导航条中的区带和对象的时间参数(例如,年代、年、月、周、天、小时等)。条的位置可以变化;然而,在一种方案中,条位于区带栈的上方,且可在“时间起始”处(例如,个人的生日或其它重要的起始点)开始,然后几乎无限地继续到未来。由此,可在从当前以及未来在时间上回溯的时间范围处找到对象。此外,贯穿在区带中保留对象维持某一级别的有意义的上下文,而不论对象的时效或发生时间如何。其它对象或数据管理系统或技术不能或不支持这一丰富且可导航的环境。
一旦选择了时间参数,用户可通过扩展或压缩一个或多个区带并将导航条移向左边或右边来查看不同时间范围和落入那些时间范围内的不同对象,来查看和浏览区带中的对象(4020)。最后,为在时间范围之间缩放(例如,从年到月或从年到周),用户可执行以下的至少一个:使用带滚轮的鼠标,该鼠标滚轮可向上移动以放大到特定的时间范围或向下移动来缩小以在屏幕上看到更大的时间范围;或者用户利用位于屏幕上的各种缩放导航按钮来选择一个特定视图(例如,小时、天、周、月、年或年代视图)(4030)。
为了向本发明的各方面提供附加环境,图41和以下讨论旨在提供其中可实现本发明的各方面的合适的操作环境4110的简要概括描述。尽管本发明是在诸如由一个或多个计算机或其它设备执行的程序模块等计算机可执行指令的通用上下文中描述的,然而本领域的技术人员将认识到,本发明也可结合其它程序模块和/或作为硬件和软件的组合来实现。
然而,一般而言,程序模块包括例程、程序、对象、组件、数据结构等,它们执行特定任务或实现特定的数据类型。操作环境4110仅是合适的操作环境的一个示例,并非对本发明的使用范围或功能提出任何局限。适用于本发明的其它公知的计算机系统、环境和/或配置包括但不限于,个人计算机、手持式或膝上设备、多处理器系统、基于微处理器的系统、可编程消费者电子产品、网络PC、小型机、大型计算机、包括上述系统或设备的分布式计算环境等等。
参考图41,用于实现本发明的各方面的示例性环境4110包括计算机4112。计算机4112包括处理单元4114、系统存储器4116和系统总线4118。系统总线4118将包括但不限于系统存储器4116的系统组件耦合至处理单元4114。处理单元4114可以是各种可用处理器的任一种。双微处理器和其它多处理器体系结构也可用作处理单元4114。
系统总线4118可以是若干种总线结构类型的任一种,包括存储器总线或存储器控制器、外围总线或外部总线、和/或使用各类总线体系结构的局部总线,这些体系结构包括但不限于,8位总线、工业标准体系结构(ISA)、微通道体系结构(MCA)、扩展ISA(EISA)、智能驱动电子设备(IDE)、VESA局部总线、外围部件互连(PCI),通用串行总线(USB)、高级图形端口(AGP)、个人计算机存储卡国际协会总线(PCMCIA)以及小型计算机系统接口(SCSI)。
系统存储器4116包括易失性存储器4120和非易失性存储器4122。基本输入/输出系统(BIOS)包括如在启动时帮助在计算机4112内的元件之间传输信息的基本例程,通常储存在非易失性存储器4122中。作为说明而非局限,非易失性存储器4122可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除ROM(EEPROM)或闪存。易失性存储器4120包括随机存取存储器(RAM),它担当外部高速缓存。作为说明而非局限,RAM以许多形式可用,如同步RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强SDRAM(ESDRAM)、同步链路DRAM(SLDRAM)和直接存储器总线RAM(DRRAM)。
计算机4112也包括可移动/不可移动、易失性/非易失性计算机存储介质。例如,图41示出了盘存储4124。盘存储4124包括但不限于,诸如磁盘驱动器、软盘驱动器、磁带驱动器、Jaz驱动器、Zip驱动器、LS-100驱动器、闪存卡或记忆棒等设备。另外,盘存储4124可单独包括存储介质或与其它存储介质组合,其它存储介质包括但不限于,诸如光盘ROM设备(CD-ROM)、可记录CD驱动器(CD-R驱动器)、可重写CD驱动器(CD-RW驱动器)或数字多功能盘ROM驱动器(DVD-ROM)等光盘驱动器。为便于盘存储设备4124连接到系统总线4118,通常使用可移动或不可移动接口,如接口4126。
可以理解,图41描述了担当用户和合适的操作环境4110中描述的基本计算机资源之间的中介的软件。这类软件包括操作系统4128。操作系统4128可储存在盘存储4124中,它用于控制和分配计算机系统4112的资源。系统应用程序4130利用操作系统4128通过储存在系统存储器4116或盘存储4124上的程序模块4132和程序数据4134对资源的管理。可以理解,本发明可用各种操作系统或操作系统的组合来实现。
用户通过输入设备4136向计算机4112输入命令和信息。输入设备4136包括但不限于,诸如鼠标、跟踪球、触针、触摸垫等定位设备、键盘、麦克风、操纵杆、游戏垫、圆盘式卫星天线、扫描仪、TV调谐卡、数码相机、数码摄像机、web摄像头等等。这些和其它输入设备通过系统总线4118经由接口端口4138连接到处理单元4114。接口端口4138包括,例如,串行端口、并行端口、游戏端口、通用串行总线(USB)。输出设备4140使用与输入设备4136相同类型端口中的某一些。由此,例如,USB端口可用于向计算机4112提供输入,并从计算机4112输出信息到输出设备4140。提供了输出适配器4142以说明存在一些输出设备4140,如监视器、扬声器和打印机等需要特殊适配器的其它输出设备4140。输出适配器4142包括,作为说明而非局限,提供输出设备4140和系统总线4118之间的连接手段的视频卡和声卡。应当注意,其它设备和/或设备的系统提供了输入和输出能力,如远程计算机4144。
计算机4112可以在使用到一个或多个远程计算机,如远程计算机4144的逻辑连接的网络化环境中操作。远程计算机4144可以是个人计算机、服务器、路由器、网络PC、工作站、基于微处理器的电器、对等设备或其它常见网络节点等等,并通常包括相对于计算机4112所描述的许多或所有元件。为简明性目的,仅示出了远程计算机4144具有存储器存储设备4146。远程计算机4144通过网络接口4148逻辑上连接至计算机4112,然后通过通信连接4150物理地连接。网络接口4148包含诸如局域网(LAN)和广域网(WAN)等通信网络。LAN技术包括光纤分布式数据接口(FDDI)、铜缆分布式数据接口(CDDI)、以太网/IEEE 802.3、令牌环/IEEE 802.5等等。WAN技术包括但不限于,点对点链路、诸如综合业务数字网(ISDN)及其变体等电路交换网络、分组交换网络以及数字订户线(DSL)。
通信连接4150指用于将网络接口4148连接到总线4118的硬件/软件。尽管为说明的清晰性,示出通信连接4150在计算机4112内,然而它也可以对计算机4112是外部的。仅为示例性目的,连接到网路接口4148必需的硬件/软件包括内部和外部技术,如包括常规电话级调制解调器、线缆调制解调器和DSL调制解调器的调制解调器、ISDN适配器和以太网卡。
上文所描述的包括本发明的示例。当然,不可能为了描述本发明而描述组件和方法的每一可想到的组合,但是本领域的普通技术人员可以认识到,本发明的许多其它组合和变更都是可能的。因此,本发明旨在包含落入所附权利要求书的精神和范围内的所有这样的替换、修改和变化。此外,在详细描述或权利要求书中使用术语“包括”的意义上,这一术语旨在以与术语“包含”类似的方式是包含性的,如同“包含”在用作权利要求书中的过渡词是所解释的那样。

Claims (20)

1.一种便于可视化数据的系统,包括:
包括一个或多个对象的数据存储;
可视化组件,它至少部分地基于每一对象的时间参数将来自所述数据存储的所述对象的至少一个子集组织成至少一个区带,以使所述对象可由至少一个用户以基于时间的方式来查看;以及
显示组件,它显示在所述至少一个区带中组织的一个或多个对象。
2.如权利要求1所述的系统,其特征在于,还包括注释组件,它用元数据注释所述一个或多个对象,所述元数据包括时间参数、对象名称、对象路径名、对象大小、以及涉及对象内容的信息。
3.如权利要求1所述的系统,其特征在于,还包括基于时间的导航控件,它便于以基于时间的方式在多个区带或对象的至少一个中导航。
4.如权利要求1所述的系统,其特征在于,还包括缩放组件,它调整在任一时刻显示器上对用户可见的细节的量。
5.如权利要求4所述的系统,其特征在于,所述缩放组件包括一个或多个基于时间的缩放导航控件,以容易地调整显示器上对用户可见的细节的量。
6.如权利要求4所述的系统,其特征在于,所述缩放组件每次执行扩展或压缩至少一个区带的至少一项。
7.如权利要求1所述的系统,其特征在于,还包括参数跟踪组件,它度量与在每一区带内以任一时间参数组织的对象相关联的至少一个参数,并在显示器上向用户可视化参数指示符,所述参数包括大小、密度和存储位置。
8.如权利要求7所述的系统,其特征在于,所述参数跟踪组件是对象密度跟踪组件,它度量相应的区带内以任一时间参数组织的对象的数量,并在相应区带内向用户显示密度指示符。
9.如权利要求1所述的系统,其特征在于,还包括浏览组件,它通过采用以下的至少一个经由显示器上显示的多个区带使用户跨显示器上可见的数据导航:至少一个缩放导航控件、至少一个区带导航控件、以及至少一个基于时间的导航控件。
10.如权利要求1所述的系统,其特征在于,还包括过滤组件,它部分地基于一个或多个过滤项将一个或多个对象从区带内的视图中移除。
11.如权利要求10所述的系统,其特征在于,所述一个或多个过滤项是至少部分地基于与所述区带的对象相关联的元数据来选择的。
12.一种对象管理和可视化方法,包括:
用多个对象填充至少一个数据存储;
至少部分地基于每一对象的时间参数,将所述对象的至少一个子集组织成至少一个区带,以便于使得对象可由用户至少以基于时间的方式查看;以及
显示在所述至少一个区带中组织的一个或多个对象。
13.如权利要求12所述的方法,其特征在于,还包括用元数据注释所述对象的至少一个子集。
14.如权利要求12所述的方法,其特征在于,还包括以基于时间的方式在多个区带或对象的至少一个中导航。
15.如权利要求12所述的方法,其特征在于,还包括选择要对其执行进一步动作的至少一个对象。
16.如权利要求12所述的方法,其特征在于,还包括进行放大或缩小对象或区带的至少一个中的至少一项,以改变对用户可见的细节的量。
17.如权利要求12所述的方法,其特征在于,还包括至少度量每一相应区带内以任一时间参数组织的对象的相对数量,以可视化与所述对象相关联的至少一个参数值,所述至少一个参数值包括对象的密度、大小、和存储位置的至少一个。
18.如权利要求12所述的方法,其特征在于,还包括当不是所有的对象都能同时处在视图中时确定在任一区带内接下来显示哪些对象。
19.如权利要求18所述的方法,其特征在于,确定接下来显示哪些对象至少部分地基于对象离显示表面有多近,其中,“近”是对象的重要性级别的函数。
20.一种对象管理和可视化系统,包括:
用于用多个对象填充至少一个数据存储的装置;
用于至少部分地基于每个对象的时间参数将所述对象的至少一个子集组织成至少一个区带,以便于使得对象可由用户至少以基于时间的方式查看的装置;
用于显示在所述至少一个区带中组织的一个或多个对象的装置;
用于以基于时间的方式在多个区带或对象的至少一个中导航的装置;
用于对对象或区带的至少一个进行放大或缩小中的至少一项操作以改变对用户可见的细节的量的装置;以及
用于至少度量每一相应区带内以任一时间参数组织的对象的相对数量,以可视化与所述对象相关联的至少一个参数值的装置,所述至少一个参数值包括对象的密度、大小和存储位置中的至少一个。
CN2005101370331A 2005-01-12 2005-12-13 用于数据的基于时间线的可视化的体系结构和引擎 Expired - Fee Related CN1804839B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/034,432 2005-01-12
US11/034,432 US7788592B2 (en) 2005-01-12 2005-01-12 Architecture and engine for time line based visualization of data

Publications (2)

Publication Number Publication Date
CN1804839A true CN1804839A (zh) 2006-07-19
CN1804839B CN1804839B (zh) 2011-03-09

Family

ID=36217041

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2005101370331A Expired - Fee Related CN1804839B (zh) 2005-01-12 2005-12-13 用于数据的基于时间线的可视化的体系结构和引擎

Country Status (5)

Country Link
US (1) US7788592B2 (zh)
EP (1) EP1681639B1 (zh)
JP (1) JP4936719B2 (zh)
KR (1) KR101169093B1 (zh)
CN (1) CN1804839B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102006278A (zh) * 2009-08-31 2011-04-06 索尼公司 信息处理设备和信息处理方法
CN102244807A (zh) * 2010-06-02 2011-11-16 微软公司 自适应视频变焦
CN101681806B (zh) * 2007-05-29 2012-03-28 东京毅力科创株式会社 数据显示装置、数据显示方法、程序
CN102572599A (zh) * 2012-03-01 2012-07-11 盛乐信息技术(上海)有限公司 音视频显示方法及系统
CN102867529A (zh) * 2012-09-05 2013-01-09 安科智慧城市技术(中国)有限公司 多媒体视频时间轴的展现方法、装置、播放方法及播放器
CN102982152A (zh) * 2011-11-29 2013-03-20 微软公司 查询结果的时间可视化
CN103914230A (zh) * 2014-04-18 2014-07-09 广州金山网络科技有限公司 一种带时间导航的图片显示的方法及装置
CN104731463A (zh) * 2013-12-19 2015-06-24 腾讯科技(深圳)有限公司 一种定位图片列表中图片的方法和装置
CN105190600A (zh) * 2013-03-04 2015-12-23 微软技术许可有限责任公司 抽象信息的基于颗粒的可视化
CN109542430A (zh) * 2017-09-22 2019-03-29 阿里巴巴集团控股有限公司 用于实现界面交互效果的方法、装置及电子设备
CN111132819A (zh) * 2017-09-26 2020-05-08 西门子股份公司 用于对对象的质量信息进行计算机辅助处理的方法和相应的辅助设备

Families Citing this family (171)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7716194B2 (en) * 2005-01-12 2010-05-11 Microsoft Corporation File management system employing time line based representation of data
US7788592B2 (en) 2005-01-12 2010-08-31 Microsoft Corporation Architecture and engine for time line based visualization of data
US20060156237A1 (en) * 2005-01-12 2006-07-13 Microsoft Corporation Time line based user interface for visualization of data
US7479970B2 (en) * 2005-01-12 2009-01-20 Microsoft Corporation Systems and methods that facilitate process monitoring, navigation, and parameter-based magnification
US20060190171A1 (en) * 2005-02-24 2006-08-24 John Cross GPS device and method for layered display of elements
JP4881034B2 (ja) * 2005-02-28 2012-02-22 富士フイルム株式会社 電子アルバム編集システム、電子アルバム編集方法、及び電子アルバム編集プログラム
US7714876B1 (en) * 2005-03-10 2010-05-11 Hewlett-Packard Development Company, L.P. Method and system for creating visualizations
US7539673B2 (en) * 2005-08-03 2009-05-26 Novell, Inc. System and method of re-ordering search results based on prior user actions
US7707146B2 (en) * 2005-08-03 2010-04-27 Novell, Inc. System and method of searching for providing clue-based context searching
US8527874B2 (en) * 2005-08-03 2013-09-03 Apple Inc. System and method of grouping search results using information representations
US7707284B2 (en) 2005-08-03 2010-04-27 Novell, Inc. System and method of searching for classifying user activity performed on a computer system
US8201073B2 (en) * 2005-08-15 2012-06-12 Disney Enterprises, Inc. System and method for automating the creation of customized multimedia content
US7966577B2 (en) 2005-10-11 2011-06-21 Apple Inc. Multimedia control center
US7721208B2 (en) 2005-10-07 2010-05-18 Apple Inc. Multi-media center for computing systems
KR100725411B1 (ko) * 2006-02-06 2007-06-07 삼성전자주식회사 컨텐츠 검색을 위한 사용자 인터페이스, 사용자 인터페이스제공 방법, 및 컨텐츠 검색 장치
CA2609873C (en) 2006-03-29 2012-12-04 Mathieu Audet Multi-dimensional locating system and method
JP4933129B2 (ja) * 2006-04-04 2012-05-16 クラリオン株式会社 情報端末および簡略−詳細情報の表示方法
US20070271263A1 (en) * 2006-05-19 2007-11-22 Matchware A/S Displaying Data
US8869037B2 (en) * 2006-06-22 2014-10-21 Linkedin Corporation Event visualization
US7831928B1 (en) 2006-06-22 2010-11-09 Digg, Inc. Content visualization
US9009115B2 (en) 2006-08-04 2015-04-14 Apple Inc. Restoring electronic information
US8370853B2 (en) 2006-08-04 2013-02-05 Apple Inc. Event notification management
US8311988B2 (en) * 2006-08-04 2012-11-13 Apple Inc. Consistent back up of electronic information
US7856424B2 (en) 2006-08-04 2010-12-21 Apple Inc. User interface for backup management
US20080034019A1 (en) * 2006-08-04 2008-02-07 Pavel Cisler System for multi-device electronic backup
US20080126442A1 (en) * 2006-08-04 2008-05-29 Pavel Cisler Architecture for back up and/or recovery of electronic data
US7860839B2 (en) 2006-08-04 2010-12-28 Apple Inc. Application-based backup-restore of electronic information
US8166415B2 (en) 2006-08-04 2012-04-24 Apple Inc. User interface for backup management
US7853566B2 (en) * 2006-08-04 2010-12-14 Apple Inc. Navigation of electronic backups
US20080034004A1 (en) * 2006-08-04 2008-02-07 Pavel Cisler System for electronic backup
WO2008050649A1 (fr) * 2006-10-23 2008-05-02 Nec Corporation Système, procédé et programme de récapitulation de contenu
US20080111826A1 (en) * 2006-11-14 2008-05-15 Microsoft Corporation Displaying resources using multiple visualization dimensions
US8381130B2 (en) * 2006-11-29 2013-02-19 Yahoo! Inc. Method and user interface tool for navigation through grid of scheduled items
US20080163048A1 (en) * 2006-12-29 2008-07-03 Gossweiler Iii Richard Carl System and method for displaying multimedia events scheduling information and Corresponding search results
US8544040B2 (en) 2006-12-29 2013-09-24 Google Inc. System and method for displaying multimedia events scheduling information
US8205230B2 (en) 2006-12-29 2012-06-19 Google Inc. System and method for displaying and searching multimedia events scheduling information
JP4552943B2 (ja) * 2007-01-19 2010-09-29 ソニー株式会社 年表提供方法、年表提供装置および年表提供プログラム
US8019155B2 (en) * 2007-03-26 2011-09-13 Eastman Kodak Company Digital object information via category-based histograms
US20080263449A1 (en) * 2007-04-20 2008-10-23 Microsoft Corporation Automated maintenance of pooled media content
US8799952B2 (en) * 2007-04-24 2014-08-05 Google Inc. Virtual channels
US8972875B2 (en) * 2007-04-24 2015-03-03 Google Inc. Relevance bar for content listings
US8826123B2 (en) 2007-05-25 2014-09-02 9224-5489 Quebec Inc. Timescale for presenting information
US20080307017A1 (en) * 2007-06-08 2008-12-11 Apple Inc. Searching and Restoring of Backups
US8010900B2 (en) * 2007-06-08 2011-08-30 Apple Inc. User interface for electronic backup
US8307004B2 (en) 2007-06-08 2012-11-06 Apple Inc. Manipulating electronic backups
US8099392B2 (en) * 2007-06-08 2012-01-17 Apple Inc. Electronic backup of applications
US8745523B2 (en) 2007-06-08 2014-06-03 Apple Inc. Deletion in electronic backups
US8468136B2 (en) * 2007-06-08 2013-06-18 Apple Inc. Efficient data backup
US8429425B2 (en) * 2007-06-08 2013-04-23 Apple Inc. Electronic backup and restoration of encrypted data
US8725965B2 (en) * 2007-06-08 2014-05-13 Apple Inc. System setup for electronic backup
US8185839B2 (en) 2007-06-09 2012-05-22 Apple Inc. Browsing or searching user interfaces and other aspects
US8201096B2 (en) 2007-06-09 2012-06-12 Apple Inc. Browsing or searching user interfaces and other aspects
US8549441B2 (en) 2007-06-15 2013-10-01 Microsoft Corporation Presenting and navigating content having varying properties
CA2601154C (en) 2007-07-07 2016-09-13 Mathieu Audet Method and system for distinguising elements of information along a plurality of axes on a basis of a commonality
US20090043646A1 (en) * 2007-08-06 2009-02-12 International Business Machines Corporation System and Method for the Automated Capture and Clustering of User Activities
US9084025B1 (en) 2007-08-06 2015-07-14 Google Inc. System and method for displaying both multimedia events search results and internet search results
US8601392B2 (en) * 2007-08-22 2013-12-03 9224-5489 Quebec Inc. Timeline for presenting information
JP5149724B2 (ja) * 2007-09-07 2013-02-20 キヤノン株式会社 画像管理装置及びその制御方法、記憶媒体
US8677262B2 (en) * 2007-09-27 2014-03-18 Rockwell Automation Technologies, Inc. Presentation of industrial automation data as a function of relevance to user
US8191005B2 (en) * 2007-09-27 2012-05-29 Rockwell Automation Technologies, Inc. Dynamically generating visualizations in industrial automation environment as a function of context and state information
US20090094188A1 (en) * 2007-10-03 2009-04-09 Edward Covannon Facilitating identification of an object recorded in digital content records
US8347231B2 (en) * 2007-10-08 2013-01-01 At&T Intellectual Property I, L.P. Methods, systems, and computer program products for displaying tag words for selection by users engaged in social tagging of content
JP2009117973A (ja) * 2007-11-02 2009-05-28 Fujifilm Corp 再生装置および再生方法
JP2009151702A (ja) * 2007-12-21 2009-07-09 Canon Inc 情報処理装置、情報処理方法、及びプログラム
JP5123690B2 (ja) * 2008-02-27 2013-01-23 キヤノン株式会社 画面データ処理装置、画面データ処理方法、及びコンピュータプログラム
CA2657835C (en) 2008-03-07 2017-09-19 Mathieu Audet Documents discrimination system and method thereof
JP2009282607A (ja) * 2008-05-20 2009-12-03 Ricoh Co Ltd 画像閲覧装置およびプログラム
US9400597B2 (en) * 2008-07-23 2016-07-26 Microsoft Technology Licensing, Llc Presenting dynamic grids
US8751921B2 (en) * 2008-07-24 2014-06-10 Microsoft Corporation Presenting annotations in hierarchical manner
JP4636141B2 (ja) * 2008-08-28 2011-02-23 ソニー株式会社 情報処理装置および方法、並びにプログラム
US8607155B2 (en) 2008-09-12 2013-12-10 9224-5489 Quebec Inc. Method of managing groups of arrays of documents
KR101521218B1 (ko) * 2008-11-04 2015-05-18 엘지전자 주식회사 휴대단말기, 및 휴대단말기의 3축 정보 제어방법
US8176096B2 (en) * 2008-12-18 2012-05-08 Microsoft Corporation Data visualization interactivity architecture
JP5419486B2 (ja) * 2009-02-10 2014-02-19 キヤノン株式会社 データ処理装置、データ処理方法、およびプログラム
US8881013B2 (en) * 2009-04-30 2014-11-04 Apple Inc. Tool for tracking versions of media sections in a composite presentation
US8522144B2 (en) * 2009-04-30 2013-08-27 Apple Inc. Media editing application with candidate clip management
US9564173B2 (en) * 2009-04-30 2017-02-07 Apple Inc. Media editing application for auditioning different types of media clips
US8631326B2 (en) * 2009-04-30 2014-01-14 Apple Inc. Segmented timeline for a media-editing application
US8359537B2 (en) 2009-04-30 2013-01-22 Apple Inc. Tool for navigating a composite presentation
US8555169B2 (en) * 2009-04-30 2013-10-08 Apple Inc. Media clip auditioning used to evaluate uncommitted media content
US8612858B2 (en) * 2009-05-01 2013-12-17 Apple Inc. Condensing graphical representations of media clips in a composite display area of a media-editing application
US8856655B2 (en) * 2009-05-01 2014-10-07 Apple Inc. Media editing application with capability to focus on graphical composite elements in a media compositing area
US9466050B2 (en) * 2009-05-22 2016-10-11 EVDense Holding Company, Inc. System and method for interactive visual representation of items along a timeline
KR20110000054A (ko) * 2009-06-26 2011-01-03 삼성전자주식회사 라이프로그 기반의 랜드마크를 출력하는 장치 및 방법
US8423088B2 (en) * 2009-07-22 2013-04-16 Microsoft Corporation Aggregated, interactive communication timeline
CN102426841A (zh) * 2009-10-31 2012-04-25 华为技术有限公司 定位播放视频的装置、方法及系统
KR101631912B1 (ko) * 2009-11-03 2016-06-20 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US8698762B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
EP2354974A1 (en) * 2010-02-09 2011-08-10 ExB Asset Management GmbH Association of information entities along a time line
US20110246882A1 (en) * 2010-03-30 2011-10-06 Microsoft Corporation Visual entertainment timeline
US20110307815A1 (en) * 2010-06-11 2011-12-15 Mygobs Oy User Interface and Method for Collecting Preference Data Graphically
US8484569B2 (en) * 2010-06-30 2013-07-09 International Business Machines Corporation Saving and restoring collaborative applications in context
EP2402867B1 (en) * 2010-07-02 2018-08-22 Accenture Global Services Limited A computer-implemented method, a computer program product and a computer system for image processing
US20120030550A1 (en) * 2010-07-28 2012-02-02 Chin Ai Method for editing multimedia
US8634662B2 (en) * 2010-08-25 2014-01-21 Apple Inc. Detecting recurring events in consumer image collections
US20120113120A1 (en) * 2010-11-05 2012-05-10 Nokia Corporation Method and apparatus for generating a visual representation of information
US8963847B2 (en) * 2010-12-06 2015-02-24 Netflix, Inc. User interface for a remote control device
JP2012128662A (ja) * 2010-12-15 2012-07-05 Samsung Electronics Co Ltd 表示制御装置、プログラムおよび表示制御方法
US9881257B2 (en) * 2010-12-29 2018-01-30 Tickr, Inc. Multi-dimensional visualization of temporal information
US8943026B2 (en) 2011-01-14 2015-01-27 Apple Inc. Visual representation of a local backup
US8984029B2 (en) 2011-01-14 2015-03-17 Apple Inc. File system management
US9058093B2 (en) 2011-02-01 2015-06-16 9224-5489 Quebec Inc. Active element
JP5734037B2 (ja) * 2011-03-15 2015-06-10 キヤノン株式会社 情報処理装置およびその制御方法およびプログラム
US9588644B2 (en) 2011-03-17 2017-03-07 Red Hat, Inc. Time-based organization of desktop items
US9824159B2 (en) 2011-03-17 2017-11-21 Red Hat, Inc. Assigning labels to desktop items
US9286299B2 (en) 2011-03-17 2016-03-15 Red Hat, Inc. Backup of data items
US8533594B2 (en) * 2011-04-19 2013-09-10 Autodesk, Inc. Hierarchical display and navigation of document revision histories
US8533593B2 (en) * 2011-04-19 2013-09-10 Autodesk, Inc Hierarchical display and navigation of document revision histories
US8533595B2 (en) * 2011-04-19 2013-09-10 Autodesk, Inc Hierarchical display and navigation of document revision histories
US8874525B2 (en) 2011-04-19 2014-10-28 Autodesk, Inc. Hierarchical display and navigation of document revision histories
US8701002B2 (en) * 2011-04-19 2014-04-15 Autodesk, Inc. Hierarchical display and navigation of document revision histories
CN103518197A (zh) * 2011-05-10 2014-01-15 汤姆逊许可公司 用于同步内容共享的技术
US20120297324A1 (en) * 2011-05-18 2012-11-22 Microsoft Corporation Navigation Control Availability
US9317390B2 (en) * 2011-06-03 2016-04-19 Microsoft Technology Licensing, Llc Collecting, aggregating, and presenting activity data
US9946430B2 (en) 2011-09-21 2018-04-17 Facebook, Inc. Displaying social networking system user information via a timeline interface
US10296159B2 (en) 2011-09-21 2019-05-21 Facebook, Inc. Displaying dynamic user interface elements in a social networking system
US10289657B2 (en) 2011-09-25 2019-05-14 9224-5489 Quebec Inc. Method of retrieving information elements on an undisplayed portion of an axis of information elements
US9111579B2 (en) 2011-11-14 2015-08-18 Apple Inc. Media editing with multi-camera media clips
KR101386514B1 (ko) * 2012-05-10 2014-04-17 서울대학교산학협력단 전자의료정보 관리시스템
US9519693B2 (en) 2012-06-11 2016-12-13 9224-5489 Quebec Inc. Method and apparatus for displaying data element axes
US9646080B2 (en) 2012-06-12 2017-05-09 9224-5489 Quebec Inc. Multi-functions axis-based interface
US10165067B2 (en) 2012-06-29 2018-12-25 Nuvi, Llc Systems and methods for visualization of electronic social network content
US9110558B2 (en) * 2012-08-03 2015-08-18 National Instruments Corporation Physics based graphical program editor
US8996583B2 (en) * 2012-09-28 2015-03-31 Emc Corporation Interactive visual data mining for increasing classification accuracy
JP6025482B2 (ja) * 2012-09-28 2016-11-16 富士ゼロックス株式会社 表示制御装置、画像表示装置、およびプログラム
US9265458B2 (en) 2012-12-04 2016-02-23 Sync-Think, Inc. Application of smooth pursuit cognitive testing paradigms to clinical drug development
US20140289603A1 (en) * 2013-02-04 2014-09-25 Sudhee Nagabhushan Subrahmanya Annotating and linking media content data
US9380976B2 (en) 2013-03-11 2016-07-05 Sync-Think, Inc. Optical neuroinformatics
USD754708S1 (en) * 2013-06-19 2016-04-26 Advanced Digital Broadcast S.A. Display screen with graphical user interface
USD771081S1 (en) * 2013-06-19 2016-11-08 Advanced Digital Broadcast S.A. Display screen with animated graphical user interface
USD770483S1 (en) * 2013-06-19 2016-11-01 Advanced Digital Broadcast S.A. Display screen with graphical user interface
US9418703B2 (en) 2013-10-09 2016-08-16 Mindset Systems Incorporated Method of and system for automatic compilation of crowdsourced digital media productions
US9304657B2 (en) 2013-12-31 2016-04-05 Abbyy Development Llc Audio tagging
US9697203B2 (en) 2014-02-03 2017-07-04 World Software Corporation System and method for interactive visual representation of metadata within a networked heterogeneous workflow environment
US9483162B2 (en) * 2014-02-20 2016-11-01 Palantir Technologies Inc. Relationship visualizations
JP2015194848A (ja) * 2014-03-31 2015-11-05 ブラザー工業株式会社 表示プログラムおよび表示装置
US9728055B2 (en) 2014-04-11 2017-08-08 Vivint, Inc. Chronological activity monitoring and review
US10089346B2 (en) 2014-04-25 2018-10-02 Dropbox, Inc. Techniques for collapsing views of content items in a graphical user interface
US9891794B2 (en) 2014-04-25 2018-02-13 Dropbox, Inc. Browsing and selecting content items based on user gestures
US9548894B2 (en) * 2014-06-06 2017-01-17 Yokogawa Electric Corporation Proximity based cross-screen experience App framework for use between an industrial automation console server and smart mobile devices
US10642471B2 (en) * 2014-06-25 2020-05-05 Oracle International Corporation Dual timeline
US20150378561A1 (en) * 2014-06-30 2015-12-31 Genesys Telecommunications Laboratories, Inc. System and method for recording agent interactions
US10394851B2 (en) * 2014-08-07 2019-08-27 Cortical.Io Ag Methods and systems for mapping data items to sparse distributed representations
KR101559838B1 (ko) 2014-11-19 2015-10-13 엔쓰리엔 주식회사 4d 데이터를 시각화하기 위한 시각화 방법 및 시스템, 및 통합 데이터 파일 생성 방법 및 장치
KR101968908B1 (ko) 2015-01-22 2019-04-15 한국전자통신연구원 시각지식 제공 장치 및 방법
US9842150B2 (en) * 2015-03-05 2017-12-12 M-Files Oy Method, an apparatus, a computer system and a computer program product for defining visibility of objects in metadata-based file arrangement in mobile environment
WO2016171874A1 (en) * 2015-04-22 2016-10-27 Google Inc. Providing user-interactive graphical timelines
US9916075B2 (en) 2015-06-05 2018-03-13 Apple Inc. Formatting content for a reduced-size user interface
JP6147825B2 (ja) * 2015-09-29 2017-06-14 株式会社東芝 電子機器および方法
US9823818B1 (en) * 2015-12-29 2017-11-21 Palantir Technologies Inc. Systems and interactive user interfaces for automatic generation of temporal representation of data objects
AU2017100670C4 (en) 2016-06-12 2019-11-21 Apple Inc. User interfaces for retrieving contextually relevant media content
US20170357644A1 (en) 2016-06-12 2017-12-14 Apple Inc. Notable moments in a collection of digital assets
DK201670609A1 (en) 2016-06-12 2018-01-02 Apple Inc User interfaces for retrieving contextually relevant media content
CN109716275B (zh) * 2016-09-19 2022-07-05 三星电子株式会社 基于个性化主题以多维模式来显示图像的方法
WO2018057272A1 (en) 2016-09-23 2018-03-29 Apple Inc. Avatar creation and editing
US20180137667A1 (en) 2016-11-14 2018-05-17 Oracle International Corporation Graph Visualization Tools With Summary Visualization For Very Large Labeled Graphs
US10585575B2 (en) * 2017-05-31 2020-03-10 Oracle International Corporation Visualizing UI tool for graph construction and exploration with alternative action timelines
US10671266B2 (en) 2017-06-05 2020-06-02 9224-5489 Quebec Inc. Method and apparatus of aligning information element axes
US10788972B2 (en) 2017-10-02 2020-09-29 Fisher-Rosemount Systems, Inc. Systems and methods for automatically populating a display area with historized process parameters
US11922283B2 (en) 2018-04-20 2024-03-05 H2O.Ai Inc. Model interpretation
US11386342B2 (en) * 2018-04-20 2022-07-12 H2O.Ai Inc. Model interpretation
US11243996B2 (en) 2018-05-07 2022-02-08 Apple Inc. Digital asset search user interface
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
US11086935B2 (en) 2018-05-07 2021-08-10 Apple Inc. Smart updates from historical database changes
CN112534423A (zh) 2018-07-31 2021-03-19 马维尔亚洲私人有限公司 存储边缘处的元数据生成
US10803135B2 (en) 2018-09-11 2020-10-13 Apple Inc. Techniques for disambiguating clustered occurrence identifiers
US10846343B2 (en) 2018-09-11 2020-11-24 Apple Inc. Techniques for disambiguating clustered location identifiers
KR102239225B1 (ko) * 2019-09-05 2021-04-12 주식회사 알마덴디자인리서치 워드 클라우드의 시각화를 위한 장치 및 방법
TWI714480B (zh) * 2020-03-19 2020-12-21 索爾智慧機械有限公司 拉帽安裝工具測試儀器之數據顯示方法
US11657556B2 (en) * 2021-08-31 2023-05-23 Paul J. Hultgren Scrolling with damped oscillation
US11921812B2 (en) * 2022-05-19 2024-03-05 Dropbox, Inc. Content creative web browser

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4091841C2 (de) * 1989-10-20 1999-04-08 Hitachi Ltd Verfahren zum Erzeugen einer Formulardarstellung und Bildschirm-Formularerzeugungssystem
US5499330A (en) * 1993-09-17 1996-03-12 Digital Equipment Corp. Document display system for organizing and displaying documents as screen objects organized along strand paths
US6983227B1 (en) * 1995-01-17 2006-01-03 Intertech Ventures, Ltd. Virtual models of complex systems
US6360234B2 (en) * 1997-08-14 2002-03-19 Virage, Inc. Video cataloger system with synchronized encoders
US6301579B1 (en) * 1998-10-20 2001-10-09 Silicon Graphics, Inc. Method, system, and computer program product for visualizing a data structure
US6268853B1 (en) * 1999-09-30 2001-07-31 Rockwell Technologies, L.L.C. Data structure for use in enterprise controls
US7415662B2 (en) * 2000-01-31 2008-08-19 Adobe Systems Incorporated Digital media management apparatus and methods
US7054508B2 (en) * 2000-08-03 2006-05-30 Canon Kabushiki Kaisha Data editing apparatus and method
JP2002082745A (ja) 2000-09-07 2002-03-22 Sony Corp 情報処理装置及び方法、並びにプログラム格納媒体
US6950989B2 (en) * 2000-12-20 2005-09-27 Eastman Kodak Company Timeline-based graphical user interface for efficient image database browsing and retrieval
US7020848B2 (en) * 2000-12-20 2006-03-28 Eastman Kodak Company Comprehensive, multi-dimensional graphical user interface using picture metadata for navigating and retrieving pictures in a picture database
US7197531B2 (en) * 2000-12-29 2007-03-27 Fotomedia Technologies, Llc Meta-application architecture for integrating photo-service websites for browser-enabled devices
US6996782B2 (en) * 2001-05-23 2006-02-07 Eastman Kodak Company Using digital objects organized according to a histogram timeline
US7984423B2 (en) * 2001-08-14 2011-07-19 National Instruments Corporation Configuration diagram which displays a configuration of a system
US20040205479A1 (en) * 2001-10-30 2004-10-14 Seaman Mark D. System and method for creating a multimedia presentation
US20030117428A1 (en) * 2001-12-20 2003-06-26 Koninklijke Philips Electronics N.V. Visual summary of audio-visual program features
JP4143956B2 (ja) 2002-02-14 2008-09-03 富士フイルム株式会社 画像表示装置及び画像管理プログラム
US7003737B2 (en) * 2002-04-19 2006-02-21 Fuji Xerox Co., Ltd. Method for interactive browsing and visualization of documents in real space and time
US20040153445A1 (en) * 2003-02-04 2004-08-05 Horvitz Eric J. Systems and methods for constructing and using models of memorability in computing and communications applications
JP2004328265A (ja) 2003-04-23 2004-11-18 Sony Corp 表示方法及び表示装置
JP2005038414A (ja) * 2003-06-30 2005-02-10 Fuji Photo Film Co Ltd ファイル管理プログラム、ファイル管理方法、ファイル管理装置、撮像装置及び記録媒体
US7818689B2 (en) * 2003-09-29 2010-10-19 Olympus Corporation Information managing method, information managing apparatus, information managing program and storage medium
US7313574B2 (en) * 2003-10-02 2007-12-25 Nokia Corporation Method for clustering and querying media items
US7334195B2 (en) * 2003-10-14 2008-02-19 Microsoft Corporation System and process for presenting search results in a histogram/cluster format
US6990637B2 (en) * 2003-10-23 2006-01-24 Microsoft Corporation Graphical user interface for 3-dimensional view of a data collection based on an attribute of the data
US20050105374A1 (en) * 2003-11-17 2005-05-19 Nokia Corporation Media diary application for use with digital device
US7109848B2 (en) * 2003-11-17 2006-09-19 Nokia Corporation Applications and methods for providing a reminder or an alert to a digital media capture device
US20050187943A1 (en) * 2004-02-09 2005-08-25 Nokia Corporation Representation of media items in a media file management application for use with a digital device
US7437005B2 (en) * 2004-02-17 2008-10-14 Microsoft Corporation Rapid visual sorting of digital files and data
US7730012B2 (en) * 2004-06-25 2010-06-01 Apple Inc. Methods and systems for managing data
US7716194B2 (en) * 2005-01-12 2010-05-11 Microsoft Corporation File management system employing time line based representation of data
US20060156237A1 (en) * 2005-01-12 2006-07-13 Microsoft Corporation Time line based user interface for visualization of data
US7421449B2 (en) * 2005-01-12 2008-09-02 Microsoft Corporation Systems and methods for managing a life journal
US7788592B2 (en) 2005-01-12 2010-08-31 Microsoft Corporation Architecture and engine for time line based visualization of data

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101681806B (zh) * 2007-05-29 2012-03-28 东京毅力科创株式会社 数据显示装置、数据显示方法、程序
CN102006278A (zh) * 2009-08-31 2011-04-06 索尼公司 信息处理设备和信息处理方法
CN102244807A (zh) * 2010-06-02 2011-11-16 微软公司 自适应视频变焦
CN102244807B (zh) * 2010-06-02 2014-04-23 微软公司 自适应视频变焦
CN102982152B (zh) * 2011-11-29 2016-03-23 微软技术许可有限责任公司 查询结果的时间可视化
CN102982152A (zh) * 2011-11-29 2013-03-20 微软公司 查询结果的时间可视化
CN102572599A (zh) * 2012-03-01 2012-07-11 盛乐信息技术(上海)有限公司 音视频显示方法及系统
CN102867529B (zh) * 2012-09-05 2015-07-15 杭州天视智能系统有限公司 多媒体视频时间轴的展现方法、装置、播放方法及播放器
CN102867529A (zh) * 2012-09-05 2013-01-09 安科智慧城市技术(中国)有限公司 多媒体视频时间轴的展现方法、装置、播放方法及播放器
CN105190600A (zh) * 2013-03-04 2015-12-23 微软技术许可有限责任公司 抽象信息的基于颗粒的可视化
CN105190600B (zh) * 2013-03-04 2017-10-17 微软技术许可有限责任公司 抽象信息的基于颗粒的可视化
CN104731463A (zh) * 2013-12-19 2015-06-24 腾讯科技(深圳)有限公司 一种定位图片列表中图片的方法和装置
WO2015090242A1 (zh) * 2013-12-19 2015-06-25 腾讯科技(深圳)有限公司 一种定位图片列表中图片的方法和装置
CN104731463B (zh) * 2013-12-19 2019-04-12 腾讯科技(深圳)有限公司 一种定位图片列表中图片的方法和装置
CN103914230A (zh) * 2014-04-18 2014-07-09 广州金山网络科技有限公司 一种带时间导航的图片显示的方法及装置
CN109542430A (zh) * 2017-09-22 2019-03-29 阿里巴巴集团控股有限公司 用于实现界面交互效果的方法、装置及电子设备
CN109542430B (zh) * 2017-09-22 2022-04-05 阿里巴巴集团控股有限公司 用于实现界面交互效果的方法、装置及电子设备
CN111132819A (zh) * 2017-09-26 2020-05-08 西门子股份公司 用于对对象的质量信息进行计算机辅助处理的方法和相应的辅助设备
CN111132819B (zh) * 2017-09-26 2022-07-12 西门子股份公司 用于对对象的质量信息进行计算机辅助处理的方法和相应的辅助设备
US11467568B2 (en) 2017-09-26 2022-10-11 Siemens Aktiengesellschaft Method for computer-aided processing of quality information of an object and a respective assistance apparatus

Also Published As

Publication number Publication date
JP4936719B2 (ja) 2012-05-23
EP1681639B1 (en) 2013-09-11
CN1804839B (zh) 2011-03-09
KR101169093B1 (ko) 2012-07-26
US7788592B2 (en) 2010-08-31
EP1681639A3 (en) 2006-10-04
KR20060082391A (ko) 2006-07-18
JP2006195970A (ja) 2006-07-27
US20060156246A1 (en) 2006-07-13
EP1681639A2 (en) 2006-07-19

Similar Documents

Publication Publication Date Title
CN1804839A (zh) 用于数据的基于时间线的可视化的体系结构和引擎
CN1804838A (zh) 采用基于时间线的数据表示的文件管理系统
US7421449B2 (en) Systems and methods for managing a life journal
TWI420329B (zh) 用於媒體註解的上下文為基之社群驅動建議之方法及其裝置、電腦可讀取儲存媒體
US20080141126A1 (en) Method and system to aid in viewing digital content
US20080097985A1 (en) Information Access With Usage-Driven Metadata Feedback
US20130305149A1 (en) Document reader and system for extraction of structural and semantic information from documents
US10698917B2 (en) Managing electronic slide decks
KR20080076958A (ko) 이메일과 관련된 항목들을 브라우징하는 시스템 및 방법,및 브라우징 시스템
US11449563B2 (en) User driven clipping based on content type
CN1598817A (zh) 计算及通讯应用中构造使用重大事件的模型的系统及方法
Rooij et al. Mediatable: Interactive categorization of multimedia collections
US20080313158A1 (en) Database file management system, integration module and browsing interface of database file management system, database file management method
US20160210355A1 (en) Searching and classifying unstructured documents based on visual navigation
US10656814B2 (en) Managing electronic documents
US11372873B2 (en) Managing electronic slide decks
US20140067349A1 (en) Clustering of personal electronically encoded items
US9836548B2 (en) Migration of tags across entities in management of personal electronically encoded items
US20140067878A1 (en) Analysis and proposal creation for management of personal electronically encoded items
EP2704028A9 (en) Migration of tags across entities in management of personal electronically encoded items
EP2704026A9 (en) Clustering of personal electronically encoded items
US20180348989A1 (en) Managing electronic documents
Cooper et al. Multimedia Information Retrieval at FX Palo Alto Laboratory
Jesus et al. An interface to retrieve personal memories using an iconic visual language
Spiliotopoulos et al. The Iterative Design and Evaluation Approach for a Socially-aware Search and Retrieval Application for Digital Archiving

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110309

Termination date: 20141213

EXPY Termination of patent right or utility model