用于针对在用户界面中执行的操作提供触觉反馈的设备、方法和图形用户界面

摘要

本发明公开了一种具有触敏表面和显示器的电子设备，所述电子设备在所述显示器上显示用户界面对象，检测所述触敏表面上的接触，并且检测所述接触在所述触敏表面上的第一移动，所述第一移动对应于对所述用户界面对象执行操作，以及响应于检测到所述第一移动，所述设备执行所述操作并在所述触敏表面上生成第一触觉输出。所述设备还检测所述接触在所述触敏表面上的第二移动，所述第二移动对应于逆向进行对所述用户界面对象的所述操作，并且响应于检测到所述第二移动，所述设备逆向进行所述操作并在所述触敏表面上生成第二触觉输出，其中所述第二触觉输出与所述第一触觉输出不同。

说明书

相关专利申请

本申请要求以下专利申请的优先权：2013年3月12日提交的标题 为“Device,Method,and Graphical User Interface for Providing Tactile  Feedback for Operations Performed in a User Interface”的美国临时专利 申请序列号61/778,284；2012年12月29日提交的标题为“Device, Method,and Graphical User Interface for Mani pulating User Interface  Objects with Visual and/or Haptic Feedback”的美国临时专利申请 61/747,278；以及2012年5月9日提交的标题为“Device,Method,and  Graphical User Interface for Manipulating User Interface Objects with  Visual and/or Haptic Feedback”的美国临时专利申请61/688,227，这些 申请均全文以引用方式并入本文中。

本申请还与以下专利申请相关：2013年3月12日提交的标题为 “Device,Method,and Graphical User Interface for Selecting Object within  a Group of Objects”的美国临时专利申请序列号61/778,092；2013年3 月12日提交的标题为“Device,Method,and Graphical User Interface for  Navigating User Interface Hierarchies”的美国临时专利申请序列号 61/778,125；2013年3月12日提交的标题为“Device,Method,and  Graphical User Interface for Manipulating Framed Graphical Objects”的美 国临时专利申请序列号61/778,156；2013年3月12日提交的标题为 “Device,Method,and Graphical User Interface for Scrolling Nested  Regions”的美国临时专利申请序列号61/778,179；2013年3月12日提 交的标题为“Device,Method,and Graphical User Interface for Displaying  Additional Information in Response to a User Contact”的美国临时专利申 请序列号61/778,171；2013年3月12日提交的标题为“Device,Method, and Graphical User Interface for Displaying User Interface Objects  Corresponding to an Application”的美国临时专利申请序列号 61/778,191；2013年3月12日提交的标题为“Device,Method,and  Graphical User Interface for Facilitating User Interaction with Controls in a  User Interface”的美国临时专利申请序列号61/778,211；2013年3月12 日提交的标题为“Device,Method,and Graphical User Interface for  Forgoing Generation of Tactile Output for a Multi-Contact Gesture”的美国 临时专利申请序列号61/778,239；2013年3月12日提交的标题为 “Device,Method,and Graphical User Interface for Providing Feedback for  Changing Activation States of a User Interface Object”的美国临时专利申 请序列号61/778,287；2013年3月12日提交的标题为“Device,Method, and Graphical User Interface for Transitioning between Touch Input to  Display Output Relationships”的美国临时专利申请序列号61/778,363； 2013年3月12日提交的标题为“Device,Method,and Graphical User  Interface for Moving a User Interface Object Based on an Intensity of a Press  Input”的美国临时专利申请序列号61/778,367；2013年3月12日提交 的标题为“Device,Method,and Graphical User Interface for Transitioning  between Display States in Response to a Gesture”的美国临时专利申请序 列号61/778,265；2013年3月12日提交的标题为“Device,Method,and  Graphical User Interface for Managing Activation of a Control Based on  Contact Intensity”的美国临时专利申请序列号61/778,373；2013年3月 13日提交的标题为“Device,Method,and Graphical User Interface for  Displaying Content Associated with a Corresponding Affordance”的美国 临时专利申请序列号61/778,412；2013年3月13日提交的标题为 “Device,Method,and Graphical User Interface for Selecting User Interface  Objects”的美国临时专利申请序列号61/778,413；2013年3月13日提 交的标题为“Device,Method,and Graphical User Interface for Moving  and Dropping a User Interface Object”的美国临时专利申请序列号 61/778,414；2013年3月13日提交的标题为“Device,Method,and  Graphical User Interface for Determining Whether to Scroll or Select  Content”的美国临时专利申请序列号61/778,416；以及2013年3月13 日提交的标题为“Device,Method,and Graphical User Interface for  Switching between User Interfaces”的美国临时专利申请序列号 61/778,418，这些申请均全文以引用方式并入本文中。

本申请还与以下专利申请相关：2012年5月9日提交的标题为 “Adaptive Haptic Feedback for Electronic Devices”的美国临时专利申请 序列号61/645,033；2012年6月28日提交的标题为“Adaptive Haptic  Feedback for Electronic Devices”的美国临时专利申请序列号 61/665,603；以及2012年8月8日提交的标题为“Adaptive Haptic  Feedback for Electronic Devices”的美国临时专利申请序列号 61/681,098，这些申请均全文以引用方式并入本文中。

技术领域

本文整体涉及具有触敏表面的电子设备，包括但不限于可检测用 于操纵用户界面的输入的具有触敏表面的电子设备。

背景技术

触敏表面作为计算机和其他电子计算设备的输入设备的使用在近 年来显著增长。示例性触敏表面包括触摸板和触摸屏显示器。此类表面 广泛用于操纵显示器上的用户界面对象。

示例性操纵包括调整一个或多个用户界面对象的位置和/或尺寸， 或激活按钮，或打开由用户界面对象表示的文件/应用程序，以及将元 数据与一个或多个用户界面对象相关联，或以其他方式操纵用户界面。 示例性用户界面对象包括数字图像、视频、文本、图标、控制元件诸如 按钮和其他图形。在一些情况下，用户将需要在文件管理程序(例如， 得自Apple Inc.(Cupertino,California)的Finder)、图像管理应用程序 (例如，得自Apple Inc.(Cupertino,California)的Aperture或iPhoto)、 数字内容(例如，视频和音乐)管理应用程序(例如，得自Apple Inc. (Cupertino,California)的iTunes)、绘图应用程序、呈现应用程序(例 如，得自Apple Inc.(Cupertino,California)的Keynote)、文字处理应用 程序(例如，得自Apple Inc.(Cupertino,California)的Pages)、网站创 建应用程序(例如，得自Apple Inc.(Cupertino,California)的iWeb)、 盘编辑应用程序(例如，得自Apple Inc.(Cupertino,California)的 iDVD)或电子表格应用程序(例如，得自Apple Inc.(Cupertino, California)的Numbers)中对用户界面对象执行此类操纵。

但是，用于执行这些操纵的现有方法是麻烦且低效的。此外，现 有的方法花费的时间比所需时间更长从而浪费能量。这后一种考虑在电 池驱动的设备中是特别重要的。

发明内容

因此，存在对具有更快、更有效的方法和界面以用于操纵用户界 面的电子设备的需要。此类方法和界面任选地补充或替换用于操纵用户 界面的常规方法。此类方法和界面减小用户的认知负担并产生更有效的 人机界面。对于电池驱动设备，此类方法和界面节省功率并增加了电池 充电之间的时间。

通过所公开的设备减少或消除了与用于具有触敏表面的电子设备 的用户界面相关联的上述缺陷和其他问题。在一些实施例中，设备是台 式计算机。在一些实施例中，设备是便携式的(例如，笔记本电脑、平 板电脑或手持设备)。在一些实施例中，设备具有触摸板。在一些实施 例中，设备具有触敏显示器(又称为“触摸屏”或“触摸屏显示 器”)。在一些实施例中，设备具有图形用户界面(GUI)、存储器、一 个或多个处理器以及存储在存储器中用于执行多个功能的一个或多个模 块、程序或指令集。在一些实施例中，用户主要通过触敏表面上的手指 接触和手势来与GUI交互。在一些实施例中，这些功能任选地包括图 像编辑、画图、呈现、文字处理、网页创建、盘编辑、电子表格制作、 玩游戏、接打电话、视频会议、收发电子邮件、即时消息通信、健身支 持、数字摄影、数字视频记录、网络浏览、数字音乐播放和/或数字视 频播放。用于执行这些功能的可执行指令任选地包括在被配置用于由一 个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产 品中。

存在对具有更多用于针对在用户界面中执行的操作提供触觉反馈 的方法和界面的电子设备的需要。此类方法和界面可补充或替换用于针 对在用户界面中执行的操作提供反馈的常规方法。此类方法和界面减小 用户的认知负担并产生更有效的人机界面。

根据一些实施例，在具有显示器和触敏表面的电子设备处执行一 种方法。该方法包括在显示器上显示用户界面对象，检测触敏表面上的 接触，以及检测该接触在触敏表面上的第一移动，该第一移动对应于对 该用户界面对象执行操作，以及响应于检测到该第一移动，执行该操作 并在触敏表面上生成第一触觉输出。该方法还包括检测该接触在触敏表 面上的第二移动，该第二移动对应于逆向进行对该用户界面对象的操 作，以及响应于检测到该第二移动，逆向进行该操作并在触敏表面上生 成第二触觉输出，其中该第二触觉输出不同于第一触觉输出。

根据一些实施例，电子设备包括：显示单元，其被配置为显示用 户界面对象；触敏表面单元，其被配置为检测用户接触；以及处理单 元，其耦接到显示单元和触敏表面单元。处理单元被配置为检测触敏表 面单元上的接触，检测该接触在触敏表面单元上的第一移动，该第一移 动对应于对该用户界面对象执行操作；以及响应于检测到该第一移动， 执行该操作并在触敏表面单元上生成第一触觉输出。处理单元被进一步 配置为检测该接触在触敏表面单元上的第二移动，该第二移动对应于逆 向进行对用户界面对象的操作；以及响应于检测到该第二移动，逆向进 行该操作并在触敏表面单元上生成第二触觉输出，其中该第二触觉输出 不同于第一触觉输出。

因此，具有显示器和触敏表面的电子设备具备更多用于针对在用 户界面中执行的操作提供触觉反馈的方法和界面，从而提高使用此类设 备的有效性、效率和用户满意度。此类方法和界面可补充或替换用于针 对在用户界面中执行的操作提供反馈的常规方法。

存在对具有更快、更有效的方法和界面来指示用户界面对象的z次 序(z-order)的变化的电子设备的需要。此类方法和界面可补充或替换用 于指示用户界面对象的z次序变化的常规方法。此类方法和界面减小用 户的认知负担并产生更有效的人机界面。对于电池驱动设备，此类方法 和界面节省功率并增加电池充电之间的时间。

根据一些实施例，在具有显示器和触敏表面的电子设备处执行一 种方法。该方法包括：在显示器上显示多个用户界面对象，其中：所述 多个用户界面对象具有z次序，所述多个用户界面对象包括第一用户界 面对象和第二用户界面对象，并且第一用户界面对象在z次序中位于第 二用户界面对象上方；当检测到触敏表面上的接触时，接收用于在z次 序中将第一用户界面对象移动到第二用户界面对象下方的请求；并且响 应于该请求：在z次序中将第一用户界面对象移动到第二用户界面对象 下方；根据确定第一用户界面对象与第二用户界面对象的至少一部分重 叠，结合将第一用户界面对象移动到第二用户界面对象下方，在触敏表 面上生成与将第一用户界面对象移动到第二用户界面对象下方相关联的 触觉输出；以及根据确定第一用户界面对象不与第二用户界面对象重 叠，放弃生成与将第一用户界面对象移动到第二用户界面对象下方相关 联的触觉输出。

根据一些实施例，电子设备包括：显示单元，其被配置为在显示 单元上显示多个用户界面对象，其中：所述多个用户界面对象具有z次 序，所述多个用户界面对象包括第一用户界面对象和第二用户界面对 象，并且第一用户界面对象在z次序中位于第二用户界面对象上方；触 敏表面单元，其被配置为接收接触；以及处理单元，其耦接到显示单元 和触敏表面单元。处理单元被配置为：当检测到触敏表面单元上的接触 时，接收用于在z次序中将第一用户界面对象移动到第二用户界面对象 下方的请求；以及响应于该请求：在z次序中将第一用户界面对象移动 到第二用户界面对象下方；根据确定第一用户界面对象与第二用户界面 对象的至少一部分重叠，结合将第一用户界面对象移动到第二用户界面 对象下方，在触敏表面单元上生成与将第一用户界面对象移动到第二用 户界面对象下方相关联的触觉输出；以及根据确定第一用户界面对象不 与第二用户界面对象重叠，放弃生成与将第一用户界面对象移动到第二 用户界面对象下方相关联的触觉输出。

因此，具有显示器和触敏表面的电子设备具备更快、更有效的用 于指示用户界面对象的z次序变化的方法和界面，从而提高使用此类设 备的有效性、效率和用户满意度。此类方法和界面可补充或替换用于指 示用户界面对象的z次序变化的常规方法。

存在对具有更快、更有效的方法和界面来当动作将导致参数被调 整为超过预定义的限度时提供反馈的电子设备的需要。此类方法和界面 可补充或替换用于当动作将导致参数被调整为超过预定义的限度时提供 反馈的常规方法。此类方法和界面减小用户的认知负担并产生更有效的 人机界面。对于电池驱动设备，此类方法和界面节省功率并增加电池充 电之间的时间。

根据一些实施例，在具有显示器和触敏表面的电子设备处执行一 种方法。该方法包括：在显示器上显示用于控制与相应的内容相关联的 参数的控件。该方法还包括：检测触敏表面上的用于调整该参数的手 势。该方法还包括响应于检测到该手势：确定与手势的程度对应的对参 数的调整；根据确定对参数的调整将使得一个或多个预定义的调整限度 被超过，在触敏表面上生成相应的触觉输出；以及根据确定对参数的调 整将不会使得所述一个或多个预定义的调整限度被超过，执行对参数的 调整而不在触敏表面上生成相应的触觉输出。

根据一些实施例，电子设备包括：显示单元，其被配置为显示用 于控制与相应的内容相关联的参数的控件；触敏表面单元，其被配置为 接收用户接触；以及处理单元，其耦接到显示单元和触敏表面单元。处 理单元被配置为：在显示单元上使能用于控制与相应的内容相关联的参 数的控件的显示；并且检测触敏表面单元上的用于调整参数的手势。处 理单元被进一步配置为，响应于检测到手势：确定与该手势的程度对应 的对参数的调整；根据确定对参数的调整将使得一个或多个预定义的调 整限度被超过，在触敏表面单元上生成相应的触觉输出；以及根据确定 对参数的调整将不会使得所述一个或多个预定义的调整限度被超过，执 行对参数的调整而不在触敏表面单元上生成相应的触觉输出。

因此，具有显示器和触敏表面的电子设备具备更快、更有效的用 于当动作将导致参数被调整为超过预定义的限度时提供反馈的方法和界 面，从而提高使用此类设备的有效性、效率和用户满意度。此类方法和 界面可补充或替换用于当动作将导致参数被调整为超过预定义的限度时 提供反馈的常规方法。

存在对具有用于提供与时钟对应的反馈的方法和界面的电子设备 的需要。此类方法和界面可补充或替换用于显示时钟的常规方法。此类 方法和界面减小用户的认知负担并产生更有效的人机界面。对于电池驱 动设备，此类方法和界面节省功率并增加电池充电之间的时间。

根据一些实施例，在具有显示器和触敏表面的电子设备处执行一 种方法。该方法包括在显示器上显示时钟的表示，检测焦点选择器在时 钟的表示上方的移动；当在时钟的表示上方检测到焦点选择器时，提供 对应于时钟的触觉反馈，其中所述触觉反馈包括触敏表面上的规则模式 的触觉输出。该方法还包括在提供触觉反馈时，检测焦点选择器远离时 钟的表示的移动，并且响应于检测到焦点选择器远离时钟的表示的移 动，停止提供对应于时钟的触觉反馈。

根据一些实施例，电子设备包括：显示单元，其被配置为显示时 钟的表示；触敏表面单元；以及处理单元，其耦接到显示单元和触敏表 面单元。处理单元被配置为：检测焦点选择器在时钟的表示上方的移 动，当在时钟的表示上方检测到焦点选择器时，提供对应于时钟的触觉 反馈，其中所述触觉反馈包括触敏表面单元上的规则模式的触觉输出。 处理单元被进一步配置为，在提供触觉反馈时，检测焦点选择器远离时 钟的表示的移动，并且响应于检测到焦点选择器远离时钟的表示的移 动，停止提供对应于时钟的触觉反馈。

因此，具有显示器和触敏表面的电子设备具备更多用于提供对应 于时钟的反馈的方法和界面，从而提高使用此类设备的有效性、效率和 用户满意度。此类方法和界面可补充或替换用于提供与时钟对应的反馈 的常规方法。

存在对具有用于提供与一首音乐的节拍对应的反馈的更快、更有 效的方法和界面的电子设备的需要。此类方法和界面可补充或替换用于 提供与一首音乐的节拍对应的反馈的常规方法。此类方法和界面减小用 户的认知负担并产生更有效的人机界面。对于电池驱动设备，此类方法 和界面节省功率并增加电池充电之间的时间。

根据一些实施例，在具有显示器和触敏表面的电子设备处执行一 种方法。该方法包括在显示器上显示一首音乐的表示。该方法还包括检 测焦点选择器在该首音乐的表示上方的移动。该方法还包括当在该首音 乐的表示上方检测到焦点选择器时，提供与该首音乐的节拍的至少一个 子组对应的触觉反馈。该方法还包括在提供触觉反馈之后，检测焦点选 择器远离该首音乐的表示的移动。该方法还包括响应于检测到焦点选择 器远离该首音乐的表示的移动，停止提供与该首音乐的节拍对应的触觉 反馈。

根据一些实施例，电子设备包括：显示单元，其被配置为显示一 首音乐的表示；触敏表面单元，其被配置为接收用户接触；以及处理单 元，其耦接到显示单元和触敏表面单元。处理单元被配置为：使能一首 音乐的表示的显示；并且检测焦点选择器在该首音乐的表示上方的移 动。处理单元被进一步配置为，当在该首音乐的表示上方检测到焦点选 择器时，提供与该首音乐的节拍的至少一个子组对应的触觉反馈。处理 单元被进一步配置为，在提供触觉反馈之后，检测焦点选择器远离该首 音乐的表示的移动。处理单元被进一步配置为，响应于检测到焦点选择 器远离该首音乐的表示的移动，停止提供与该首音乐的节拍对应的触觉 反馈。

因此，具有显示器和触敏表面的电子设备具备更快、更有效的用 于提供与一首音乐的节拍对应的反馈的方法和界面，从而提高使用此类 设备的有效性、效率和用户满意度。此类方法和界面可补充或替换用于 提供与一首音乐的节拍对应的反馈的常规方法。

根据一些实施例，电子设备包括显示器、触敏表面、存储器、任 选地用于检测与触敏表面的接触的强度的一个或多个传感器、一个或多 个处理器、以及一个或多个程序；所述一个或多个程序存储在存储器中 并且被配置为由所述一个或多个处理器执行，并且所述一个或多个程序 包括用于对段落[0058]中所提及的方法中的任一方法执行操作的指令。 根据一些实施例，具有显示器、触敏表面、存储器、任选地用于检测与 触敏表面的接触的强度的一个或多个传感器、以及用于执行存储在存储 器中的一个或多个程序的一个或多个处理器的电子设备上的图形用户界 面包括在段落[0058]中提及的方法中的任一方法显示的一个或多个元 件，所述元件响应于输入而更新，如段落[0058]中提及的方法中的任一 方法所描述的。根据一些实施例，计算机可读存储介质在其中存储有指 令，所述指令当由具有显示器、触敏表面、以及任选地用于检测与触敏 表面的接触的强度的一个或多个传感器的电子设备执行时，致使该设备 对段落[0058]中提及的方法中的任一方法执行操作。根据一些实施例， 电子设备包括：显示器、触敏表面、以及任选地用于检测与触敏表面的 接触的强度的一个或多个传感器；以及用于对段落[0058]中提及的方法 中的任一方法执行操作的装置。根据一些实施例，用于在具有显示器和 触敏表面、任选地用于检测与触敏表面的接触的强度的一个或多个传感 器的电子设备中使用的信息处理装置包括用于对段落[0058]中提及的方 法中的任一方法执行操作的装置。

附图说明

为了更好地理解本发明的所描述的各种实施例，应该结合以下附 图参考下面的实施例的说明，在附图中，类似的附图标号在所有附图中 指示对应的部分。

图1A是示出根据一些实施例的具有触敏显示器的便携式多功能设 备的框图。

图1B是示出根据一些实施例的用于事件处理的示例性部件的框 图。

图2示出根据一些实施例的具有触摸屏的便携式多功能设备。

图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设 备的框图。

图4A示出根据一些实施例的用于便携式多功能设备上的应用程序 的菜单的示例性用户界面。

图4B示出根据一些实施例的用于具有与显示器分开的触敏表面的 多功能设备的示例性用户界面。

图5A-5O示出根据一些实施例的用于针对在用户界面中执行的操 作提供触觉反馈的示例性用户界面。

图6A-6C是示出根据一些实施例的针对在用户界面中执行的操作 提供触觉反馈的一种方法的流程图。

图7是根据一些实施例的电子设备的功能框图。

图8A-8S示出根据一些实施例的用于指示用户界面对象的z次序变 化的示例性用户界面。

图9A-9D是示出根据一些实施例的指示用户界面对象的z次序变 化的一种方法的流程图。

图10是根据一些实施例的电子设备的功能框图。

图11A-11T示出根据一些实施例的用于当动作将导致参数被调整 为超过预定义的限度时提供反馈的示例性用户界面。

图12A-12B是示出根据一些实施例的当动作将导致参数被调整为 超过预定义的限度时提供反馈的一种方法的流程图。

图13是根据一些实施例的电子设备的功能框图。

图14A-14J示出根据一些实施例的用于提供与时钟对应的触觉反馈 的示例性用户界面。

图15A-15B是示出根据一些实施例的提供与时钟对应的触觉反馈 的一种方法的流程图。

图16是根据一些实施例的电子设备的功能框图。

图17A-17L示出根据一些实施例的用于提供与一首音乐的节拍对 应的反馈的示例性用户界面。

图17M-17O示出根据一些实施例的用于生成触觉输出的移动轮廓 的示例性波形。

图18A-18B是示出根据一些实施例的提供与一首音乐的节拍对应 的反馈的一种方法的流程图。

图19是根据一些实施例的电子设备的功能框图。

具体实施方式

本文中所描述的方法、设备和GUI提供使得用户界面对象的操纵 对于用户更有效且更直观的视觉和/或触觉反馈。例如，在其中触控板 的点击动作与需要达到激活阈值的接触强度(例如，接触力、接触压力 或其替代物)解耦的系统中，设备可针对不同激活事件生成不同触觉输 出(例如，“不同点击”)(例如，使得实现特定结果的点击区别于不 产生任何结果或实现与特定结果不同的结果的点击)。另外，可响应于 与接触的增大强度不相关的其他事件来生成触觉输出，诸如当用户界面 对象移动到特定位置、边界或取向时，或者当事件发生在设备处时生成 触觉输出(例如，“止动”)。

另外，在其中触控板或触摸屏显示器对包括多于一个或两个特定 强度值(例如，不只是简单的开/关二元强度确定)的接触强度的范围 敏感的系统中，用户界面可提供用于指示该范围内的接触强度的响应 (例如，视觉或触觉提示)。在一些具体实施中，对输入的预激活阈值 响应和/或激活后阈值响应被显示为连续动画。作为此类响应的一个示 例，响应于检测到接触强度增大仍低于用于执行操作的激活阈值而显示 操作的预览。作为此类响应的另一个示例，甚至在用于操作的激活阈值 已经达到之后还使与操作相关联的动画继续。这两个示例均向用户提供 对用户接触的力或压力的连续响应，该响应向用户提供更丰富且更直观 的视觉和/或触觉反馈。更具体地讲，此类连续力响应给予用户能够轻 轻按压以预览操作和/或深深按压以“穿过”或“通过”与该操作对应 的预定义的用户界面状态的体验。

另外，对于具有对接触强度的范围敏感的触敏表面的设备，多个 接触强度阈值可由设备监测，并且不同功能可被映射到不同接触强度阈 值。这用于增大可用的“手势空间”，从而使得用户易于访问先进特 征，该用户知道在第二“深按压”强度阈值处或超过第二“深按压”强 度阈值增大接触强度将致使设备执行操作，该操作不同于在接触强度介 于第一“激活”强度阈值与第二“深按压”强度阈值之间的情况下将执 行的操作。在第一“激活”强度阈值处维持熟悉功能时向第二“深按 压”强度阈值指定附加功能的优点在于，在一些情况下，对附加功能感 到困惑的没有经验的用户可通过仅施加最多至第一“激活”强度阈值的 强度来使用熟悉的功能，而较有经验的用户可通过施加处于第二“深按 压”强度阈值的强度来利用附加功能。

另外，对于具有对接触强度的范围敏感的触敏表面的设备，该设 备可通过允许用户用单个连续接触执行复杂操作来提供附加功能。例 如，当选择一组对象时，用户可围绕触敏表面移动连续接触并且可在拖 动时按压(例如，施加大于“深按压”强度阈值的强度)以向选择添加 附加元件。这样，用户可直观地与用户界面交互，其中用接触较用力的 按压致使用户界面中的对象“更粘”。

下文描述在设备上提供直观用户界面的多个不同方法，其中点击 动作与需要达到激活阈值的力解耦和/或设备对接触强度的广泛范围敏 感。使用这些方法中的一个或多个(任选地彼此结合)有助于提供直观 地向用户提供附加信息和功能的用户界面，从而减小用户的认知负担并 且改进人机界面。人机界面的此类改进使得用户能够更快速且更有效地 使用该设备。对于电池驱动的设备，这些改进节省了功率并且增加了电 池充电之间的时间。为了便于解释，下文如下描述了用于包括这些方法 中的一些的例示性示例的系统、方法和用户界面：

·许多电子设备具有包括用户界面对象的图形用户界面。通常存 在可对界面对象执行的许多操作。例如，可将界面对象对齐 (snap)到辅助线或从辅助线移除。一些用户界面提供用于指 示操作是否已被执行或逆向的视觉反馈。然而，在一些情形 中，用户将不会注意到视觉反馈，因此将对操作是否已被执行 或逆向感到困惑。下文描述的实施例通过向用户生成与所执行 的操作对应的触觉输出来改进这些方法，从而提供更为便利且 有效的用户界面。具体来讲，图5A-5O示出用于针对在用户界 面中执行的操作提供触觉反馈的示例性用户界面。图6A-6C是 示出针对在用户界面中执行的操作提供触觉反馈的一种方法的 流程图。图5A-5O中的用户界面进一步用于示出下文参考图 6A-6C描述的过程。

·许多电子设备显示具有层次序(例如，用户界面对象的z次序 或从前到后的次序)的用户界面对象。在一些情况下，用户通 过在显示器上重新定位对象来与此类对象交互，并且根据对象 从前到后的次序在显示器上显示重叠对象(例如，在两个对象 重叠的情况下，将一个对象显示为在另一个对象“前面”)。 除了在显示器上重新定位对象之外，用户经常想要改变对象在 显示器上的从前到后的次序。在一些方法中，用视觉反馈指示z 次序的变化。然而，在一些情形中，用户将不会注意到视觉反 馈，因此将对操作是否已被执行感到困惑。下文描述的实施例 通过当对象彼此重叠且它们的z次序变化时提供触觉输出来改 进这些方法，从而提供更为便利且有效的用户界面。特别地， 图8A-8S示出用于指示用户界面对象的z次序变化的示例性用 户界面。图9A-9D是示出指示用户界面对象的z次序变化的一 种方法的流程图。图8A-8S中的用户界面用于示出图9A-9D中 的过程。

·许多电子设备具有显示用户界面对象的图形用户界面，这些用 户界面对象可通过调整一个或多个相关联的参数诸如用户界面 对象的尺寸来操纵。出于实际原因，这些参数中具有预定义的 调整限度的一些参数通常被分配给这些用户界面对象，从而限 制它们的属性能够被调整的程度。一些用户界面提供用于指示 是否已超过预定义的调整限度的视觉反馈。然而，在一些情形 中，用户将不会注意到视觉反馈，因此将对是否已超过预定义 的调整限度感到困惑。下文描述的实施例提供改进方法和用户 界面，所述改进方法和用户界面用于当动作将导致参数被调整 为超过预定义的调整限度时通过提供触觉反馈来向导航复杂用 户界面的用户生成反馈，从而提供更为便利且有效的用户界 面。特别地，图11A-11T示出用于当动作将导致参数被调整为 超过预定义的限度时提供反馈的示例性用户界面。图12A-12B 是示出当动作将导致参数被调整为超过预定义的限度时提供反 馈的一种方法的流程图。图11A-11T中的用户界面用于示出图 12A-12B中的过程。

·许多电子设备具有包括时钟的表示的图形用户界面。通常有需 要向用户提供用于接收与时钟对应的反馈的有效且便利的方 式。一些用户界面提供用于指示时钟上的时间前进的视觉反 馈。然而，在一些情形中，用户将把视线从时钟移开或者分散 注意力，并且将不能够在执行另一个任务时注意到视觉反馈。 以下实施例通过向用户生成对应于时钟的触觉输出(例如， “滴答”模式的触觉输出)来改进这些方法，从而通过使用户 能够在监视时钟上的时间前进时注意到不同的视觉元素来提供 更为便利且有效的用户界面。特别地，图14A-14J示出根据一 些实施例的用于提供对应于时钟的触觉反馈的示例性用户界 面。这些附图中的用户界面用于示出下文描述的过程，包括下 文参考图15A-15B描述的过程。

·许多电子设备具有显示应用程序窗口的图形用户界面，所述应 用程序窗口示出一首音乐的表示(例如，用于该首音乐的专辑 的一张封面的图形表示、指示当前正在播放的一首音乐的区域 或对应于一首音乐的乐谱的图形表示中的一首音乐的音符)。 考虑到包括与具有音频分量和视觉分量两者的应用程序(例 如，音乐回放、音乐合成、视频回放或视频合成应用程序)对 应的应用程序窗口的用户界面环境的复杂性，需要提供使得用 户能够更有效且便利地导航通过用户界面环境的反馈。一些用 户界面提用于指示一首音乐的音符的视觉反馈。然而，在一些 情形中，用户将把视线从用户界面的提供用于指示一首音乐的 音符的视觉反馈的区域移开或者分散注意力，并且将不能够在 执行另一个任务时注意到视觉反馈。下文描述的实施例提供改 进方法和用户界面，所述改进方法和用户界面用于通过生成与 一首音乐中的音符对应的触觉输出来向导航复杂用户界面环境 的用户生成反馈，从而通过使用户能够在监视该首音乐中的音 符时注意到不同视觉元素来提供更为便利且有效的用户界面。 更具体地讲，这些方法和用户界面提供与在显示器上表示的一 首音乐的节拍对应的反馈。在下文中，图17A-17L示出用于提 供与一首音乐的节拍对应的反馈的示例性用户界面。图18A- 18B是示出提供与一首音乐的节拍对应的反馈的一种方法的流 程图。图17A-17L中的用户界面用于示出图18A-18B中的过 程。

示例性设备

现在将详细地参考实施例，这些实施例的示例在附图中被示出。 在下面的详细描述中示出许多具体细节，以便提供对各种所描述的实施 例的充分理解。但是，对本领域的普通技术人员将显而易见的是，各种 所描述的实施例可以在没有这些具体细节的情况下被实践。在其他情况 下，没有详细地描述众所周知的方法、过程、部件、电路和网络，从而 不会不必要地使实施例的方面晦涩。

还将理解的是，虽然术语“第一”、“第二”等在本文中在一些 实施例中用来描述各种元素，但是这些元素不应受到这些术语限制。这 些术语只是用来将一个元素与另一元素区分开。例如，第一接触可以被 命名为第二接触，并且类似地，第二接触可以被命名为第一接触，而不 背离各种所描述的实施例的范围。第一接触和第二接触二者都是接触， 但是它们不是同一接触。

在本文中对各种所描述的实施例的描述中所使用的术语只是为了 描述特定实施例的目的，而并非旨在进行限制。如在对各种所描述的实 施例的描述和所附权利要求书中所使用，单数形式“一个”、“一种” 和“所述”旨在也包括复数形式，除非上下文明确地另外指出。也将理 解的是，本文所用的术语“和/或”是指并包括相关联的所列出的项目 中的一者或多者的任何和所有可能的组合。另外将理解的是，当术语 “包括”和/或“包含”在本说明书中使用时，规定了所阐明的特征、 整数、步骤、操作、元件和/或部件的存在，但不排除存在或增加一个 或多个其他特征、整数、步骤、操作、元件、部件和/或它们的分组。

如本文所用，根据上下文，术语“如果”任选地被解释为意思是 “当……时”或“在……时”或“响应于确定”或“响应于检测到”。 类似地，根据上下文，短语“如果确定”或“如果检测到[所陈述的条 件或事件]”任选地被解释为意思是“在确定……时”或“响应于确 定”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述 的条件或事件]”。

介绍了电子设备、用于这样的设备的用户界面和用于使用这样的 设备的相关联过程的实施例。在一些实施例中，设备为还包含其他功能 诸如个人数字助理和/或音乐播放器功能的便携式通信设备，诸如移动 电话。便携式多功能设备的示例性实施例包括但不限于得自Apple Inc. (Cupertino,California)的iPod和设备。任选地使 用其他便携式电子设备，诸如具有触敏表面(例如，触摸屏显示器和/ 或触摸板)的膝上型计算机或平板电脑。也应当理解的是，在一些实施 例中，该设备并非便携式通信设备，而是具有触敏表面(例如，触摸屏 显示器和/或触摸板)的台式计算机。

在下面的讨论中，介绍了一种包括显示器和触敏表面的电子设 备。然而应当理解，电子设备任选地包括一个或多个其他物理用户接口 设备，诸如物理键盘、鼠标和/或控制杆。

该设备通常支持多种应用程序，诸如以下一者或多者：绘图应用 程序、呈现应用程序、文字处理应用程序、网站创建应用程序、盘编辑 应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会 议应用程序、电子邮件应用程序、即时消息应用程序、健身支持应用程 序、图片管理应用程序、数字相机应用程序、数字摄像机应用程序、网 页浏览应用程序、数字音乐播放器应用程序、和/或数字视频播放器应 用程序。

在设备上执行的各种应用程序任选地使用至少一个共用的物理用 户接口设备，诸如触敏表面。触敏表面的一种或多种功能以及显示在设 备上的对应信息任选地从一种应用程序调整和/或变化至下一种应用程 序和/或在相应的应用程序内被调整和/或变化。这样，设备的共用物理 架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面 来支持各种应用程序。

现在关注具有触敏显示器的便携式设备的实施例。图1A是示出根 据一些实施例的具有触敏显示器112的便携式多功能设备100的框图。 触敏显示器112有时为了方便被叫做“触摸屏”，并且有时被称为或被 叫做触敏显示器系统。设备100包括存储器102(任选地包括一个或多 个计算机可读存储介质)、存储器控制器122、一个或多个处理单元 (CPU)120、外围设备接口118、射频电路108、音频电路110、扬声器 111、麦克风113、输入/输出(I/O)子系统106、其他输入或控制设备 116和外部端口124。设备100任选地包括一个或多个光学传感器 164。设备100任选地包括用于检测设备100上的接触的强度的一个或 多个强度传感器165(例如，触敏表面，诸如设备100的触敏显示器系 统112)。设备100任选地包括用于在设备100上生成触觉输出的一个 或多个触觉输出发生器167(例如，在触敏表面诸如设备100的触敏显 示器系统112或设备300的触摸板355上生成触觉输出)。这些部件任 选地通过一根或多根通信总线或信号线103通信。

如在本说明书和权利要求书中所使用，术语触敏表面上的接触的 “强度”是指触敏表面上的接触(例如，手指接触)的力或压力(每单 位面积的力)，或是指触敏表面上的接触的力或压力的替代物(代用 物)。接触的强度具有值范围，该值范围包括至少四个不同值并且更典 型地包括上百个不同值(例如，至少256个)。接触的强度任选地使用 各种方法和各种传感器或传感器的组合来确定(或测量)。例如，在触 敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触 敏表面上的不同点处的力。在一些实施例中，来自多个力传感器的力值 测量被合并(例如，加权平均数)以确定对接触的估计的力。类似地， 触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。或者，在触 敏表面上检测到的接触面积的大小和/或其变化、邻近接触的触敏表面 的电容和/或其变化、和/或邻近接触的触敏表面的电阻和/或其变化任选 地用作触敏表面上的接触的力或压力的替代物。在一些实施例中，接触 力或压力的替代物测量直接用于确定是否已经超过强度阈值(例如，强 度阈值是以与替代物测量对应的单位来描述)。在一些实施例中，接触 力或压力的替代物测量被转换成估计的力或压力，并且估计的力或压力 用于确定是否已经超过强度阈值(例如，强度阈值是以压力的单位来测 量的压力阈值)。

如本说明书和权利要求书中所使用，术语“触觉输出”是指将由 用户通过用户的触摸感检测到的设备相对于设备的先前位置的物理位 移、设备的部件(例如，触敏表面)相对于设备的另一个部件(例如， 外壳)的物理位移、或部件相对于设备的质心的位移。例如，在设备或 设备的部件与用户对触摸敏感的表面(例如，手指、手掌或用户的手部 的其他部分)接触的情况下，通过物理位移生成的触觉输出将由用户解 读为触感，该触感与所感知到的设备或设备部件的物理特性上的变化对 应。例如，触敏表面(例如，触敏显示器或触控板)的移动任选地由用 户解读为对物理致动器按钮的“按下点击”或“松开点击”。在一些情 况下，用户将感觉到触感，诸如“按下点击”或“松开点击”，即使在 通过用户的移动而物理地被按压(例如，被移位)的与触敏表面相关联 的物理致动器按钮没有移动时。又如，触敏表面的移动任选地由用户解 读为或感测为触敏表面的“粗糙度”，即使在触敏表面的光滑度无变化 时。虽然此类由用户对触摸的解读将受到用户的个人化感官知觉限制， 但是有许多触摸的感官知觉是大多数用户共有的。因此，当触觉输出被 描述为与用户的特定感官知觉(例如，“按下点击”、“松开点击”、 “粗糙度”)对应时，除非另外陈述，否则所生成的触觉输出与设备或 其部件的物理位移对应，该物理位移将会生成典型(或普通)用户的所 描述的感官知觉。

应当理解，设备100只是一种便携式多功能设备的一个示例，并且 设备100任选地具有比所示出的更多或更少的部件，任选地组合两个或 更多个部件，或者任选地具有这些部件的不同配置或布置。图1A中所 示的各种部件在硬件、软件或硬件和软件两者的组合中实施，该硬件或 软件包括一个或多个信号处理和/或专用集成电路。

存储器102任选地包括高速随机存取存储器，并且还任选地包括非 易失性存储器，诸如一个或多个磁盘存储设备、闪存存储器设备、或其 他非易失性固态存储器设备。设备100的其他部件(诸如CPU 120和 外围设备接口118)对存储器102的访问任选地由存储器控制器122来 控制。

外围设备接口118可以被用来将设备的输入和输出外围设备耦接到 CPU 120和存储器102。该一个或多个处理器120运行或执行存储在存 储器102中的各种软件程序和/或指令集，以执行设备100的各种功能 以及处理数据。

在一些实施例中，外围设备接口118、CPU 120和存储器控制器 122任选地被实现在单个芯片诸如芯片104上。在一些其他实施例中， 它们任选地被实现在独立的芯片上。

RF(射频)电路108接收和发送射频信号，也被叫做电磁信号。 射频电路108将电信号转换为电磁信号/将电磁信号转换为电信号，并 且经由电磁信号与通信网络及其他通信设备通信。射频电路108任选地 包括用于执行这些功能的众所周知的电路，包括但不限于天线系统、射 频收发器、调谐器、一个或多个放大器、一个或多个振荡器、数字信号 处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。射频电 路108任选地通过无线通信与网络以及其他设备通信，网络诸如是互联 网(也被称为万维网(WWW))、内联网和/或无线网络(诸如蜂窝电话 网络、无线局域网(LAN)和/或城域网(MAN))。无线通信任选地使用多 种通信标准、协议和技术中的任何一种，包括但不限于全球移动通信系 统(GSM)、增强的数据GSM环境(EDGE)、高速下行链路分组接入 (HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、 HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通 信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址 (TDMA)、蓝牙、无线保真(Wi-Fi)(例如，IEEE 802.11a、IEEE  802.11b、IEEE 802.11g和/或IEEE 802.11n)、互联网协议语音技术 (VoiP)、Wi-MAX、电子邮件协议(例如，互联网消息访问协议(IMAP) 和/或邮局协议(POP))、即时消息(例如，可扩展消息处理现场协议 (XMPP)、用于即时消息和现场利用扩展的会话发起协议(SIMPLE)、即 时消息和到场服务(IMPS))和/或短消息服务(SMS)、或者其他任何适当 的通信协议，包括在本文档提交日期还未开发出的通信协议。

音频电路110、扬声器111和麦克风113提供用户与设备100之间 的音频接口。音频电路110从外围设备接口118接收音频数据，将音频 数据转换为电信号，并将电信号传输到扬声器111。扬声器111将电信 号转换为人类可听到的声波。音频电路110还接收由麦克风113根据声 波转换来的电信号。音频电路110将电信号转换为音频数据，并将音频 数据传输到外围设备接口118以进行处理。音频数据任选地由外围设备 接口118检索自和/或传输至存储器102和/或射频电路108。在一些实 施例中，音频电路110还包括耳麦插孔(例如，图2中的212)。耳麦 插孔提供音频电路110与可移除的音频输入/输出外围设备之间的接 口，该外围设备诸如仅输出的耳机或者具有输出(例如，单耳或双耳耳 机)和输入(例如，麦克风)二者的耳麦。

I/O子系统106将设备100上的输入/输出外围设备，诸如触摸屏 112和其他输入控制设备116，耦接到外围设备接口118。I/O子系统 106任选地包括显示控制器156、光学传感器控制器158、强度传感器 控制器159、触觉反馈控制器161、和用于其他输入或控制设备的一个 或多个输入控制器160。该一个或多个输入控制器160从其他输入控制 设备116接收电信号/发送电信号到其他输入控制设备116。其他输入控 制设备116任选地包括物理按钮(例如，下压按钮、摇臂按钮等)、拨 号盘、滑动开关、操纵杆、点击轮等等。在一些另选的实施例中，输入 控制器160任选地耦接到以下任一者(或不耦接到以下任一者)：键 盘、红外线端口、USB端口，以及指针设备诸如鼠标。一个或多个按 钮(例如，图2中的208)任选地包括用于扬声器111和/或麦克风113 的音量控制的增大/减小按钮。一个或多个按钮任选地包括下压按钮 (例如，图2中的206)。

触敏显示器112提供设备与用户之间的输入接口和输出接口。显示 控制器156从触摸屏112接收电信号和/或向触摸屏112发送电信号。 触摸屏112向用户显示视觉输出。视觉输出任选地包括图形、文本、图 标、视频和它们的任何组合(统称为“图形”)。在一些实施例中，一 些视觉输出或全部的视觉输出对应于用户界面对象。

触摸屏112具有基于触觉和/或触觉接触从用户接受输入的触敏表 面、传感器或传感器组。触摸屏112和显示控制器156(与存储器102 中的任何相关联模块和/或指令集一起)检测触摸屏112上的接触(和 该接触的任何移动或中断)，并且将所检测到的接触转换为与显示在触 摸屏112上的用户界面对象(例如，一个或多个软按键、图标、网页或 图像)的交互。在示例性实施例中，触摸屏112与用户之间的接触对应 于用户的手指。

触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚 合物显示器)技术、或LED(发光二极管)技术，但是在其他实施例 中使用其他显示技术。触摸屏112和显示控制器156任选地使用现在已 知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传 感器阵列或用于确定与触摸屏112接触的一个或多个点的其他元件来检 测接触及其任何移动或中断，该多种触摸感测技术包括但不限于电容性 的、电阻性的、红外线的和表面声波技术。在一示例性实施例中，使用 投射式互电容感测技术，诸如从Apple Inc.(Cupertino,California)的 iPod和发现的技术。

触摸屏112任选地具有超过100dpi的视频分辨率。在一些实施例 中，触摸屏具有约160dpi的视频分辨率。用户任选地使用任何合适的 物体或附加物诸如触笔、手指等等，与触摸屏112接触。在一些实施例 中，用户界面被设计为主要与基于手指的接触和手势一起工作，这与基 于触笔的输入相比由于手指在触摸屏上接触面积更大而可能精确度更 低。在一些实施例中，设备将基于手指的粗略输入翻译为精确的指针/ 光标位置或命令，以执行用户所期望的动作。

在一些实施例中，除了触摸屏之外，设备100任选地包括用于激活 或去激活特定功能的触摸板(未示出)。在一些实施例中，触摸板是设 备的触敏区域，该触敏区域与触摸屏不同，其不显示视觉输出。触摸板 任选地是与触摸屏112分开的触敏表面，或者是由触摸屏形成的触敏表 面的延伸部分。

设备100还包括用于为各种部件供电的电力系统162。电力系统 162任选地包括电力管理系统、一个或多个电源(例如，电池、交流电 (AC))、再充电系统、电力故障检测电路、电源转换器或逆变器、电 力状态指示器(例如，发光二极管(LED))和任何其他与便携式设备中 电力的生成、管理和分配相关联的部件。

设备100任选地还包括一个或多个光学传感器164。图1A示出耦 接到I/O子系统106中光学传感器控制器158的光学传感器。光学传感 器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS) 光电晶体管。光学传感器164从环境接收通过一个或多个透镜投射的 光，并且将光转换为表示图像的数据。结合成像模块143(也叫做相机 模块)，光学传感器164任选地捕获静态图像或视频。在一些实施例 中，光学传感器位于设备100的后部上，与设备前部上的触摸屏显示器 112相背对，使得触摸屏显示器能够用作用于静态图像和/或视频图像采 集的取景器。在一些实施例中，另一个光学传感器位于设备的前部上， 使得用户在触摸屏显示器上观看其他视频会议参与者的同时，任选地获 得该用户的图像以用于视频会议。

设备100任选地还包括一个或多个接触强度传感器165。图1A示 出耦接到I/O子系统106中强度传感器控制器159的接触强度传感器。 接触强度传感器165任选地包括一个或多个压阻式应变计、电容式力传 感器、电力传感器、压电式力传感器、光学力传感器、电容式触敏表面 或其他强度传感器(例如，用于测量触敏表面上的接触的力(或压力) 的传感器)。接触强度传感器165从环境接收接触强度信息(例如，压 力信息或压力信息的代理)。在一些实施例中，至少一个接触强度传感 器与触敏表面(例如，触敏显示器系统112)并置排列或邻近。在一些 实施例中，至少一个接触强度传感器位于设备100的后部上，与位于设 备100的前部上的触摸屏显示器112相背对。

设备100任选地还包括一个或多个接近传感器166。图1A示出耦 接到外围设备接口118的接近传感器166。作为另外一种选择，接近传 感器166耦接到I/O子系统106中的输入控制器160。在一些实施例 中，当多功能设备被放置在用户耳朵附近时(例如，当用户打电话 时)，所述接近传感器关闭并禁用触摸屏112。

设备100任选地还包括一个或多个触觉输出发生器167。图1A示 出耦接到I/O子系统106中的触觉反馈控制器161的触觉输出发生器。 触觉输出发生器167任选地包括：一个或多个电声设备，诸如扬声器或 其他音频部件；和/或将能量转换成线性运动的机电设备，诸如电机、 螺线管、电活性聚合物、压电致动器、静电致动器或其他触觉输出生成 部件(例如，将电信号转换成设备上的触觉输出的部件)。接触强度传 感器165从触觉反馈模块133接收触觉反馈生成指令，并且在设备100 上生成能够由设备100的用户感测到的触觉输出。在一些实施例中，至 少一个触觉输出发生器与触敏表面(例如，触敏显示器系统112)并置 排列或邻近，并且任选地通过竖直地(例如，向设备100的表面之内/ 之外)或侧向地(例如，在与设备100的表面相同的平面中前后地)移 动触敏表面来生成触觉输出。在一些实施例中，至少一个触觉输出发生 器传感器位于设备100的后部上，与位于设备100的前部上的触摸屏显 示器112相背对。

设备100任选地还包括一个或多个加速度计168。图1A示出耦接 到外围设备接口118的加速度计168。作为另外一种选择，加速度计 168任选地耦接到I/O子系统106中的输入控制器160。在一些实施例 中，信息基于对从该一个或多个加速度计所接收的数据的分析而在触摸 屏显示器上以纵向视图或横向视图被显示。设备100任选地除了加速度 计168之外还包括磁力仪(未示出)和GPS(或GLONASS或其他全 球导航系统)接收器(未示出)，用于获得关于设备100的位置和取向 (例如，纵向或横向)的信息。

在一些实施例中，存储在存储器102中的软件部件包括操作系统 126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图 形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系 统(GPS)模块(或指令集)135以及应用程序(或指令集)136。此外， 在一些实施例中，存储器102存储设备/全局内部状态157，如图1A和 图3中所示。设备/全局内部状态157包括以下中的一者或多者：活动 应用程序状态，用于指示哪些应用程序(如果有的话)当前是活动的； 显示状态，用于指示哪些应用程序、视图或其他信息占据触摸屏显示器 112的各个区域；传感器状态，包括从设备的各个传感器和输入控制设 备116获得的信息；以及关于设备的位置和/或姿态的位置信息。

操作系统126(例如，Darwin、RTXC、LINUX、UNIX、OS X、 WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理 一般系统任务(例如，存储器管理、存储设备控制、电力管理等)的各 种软件部件和/或驱动器，并且有利于各种硬件和软件部件之间的通 信。

通信模块128有利于通过一个或多个外部端口124与其他设备通 信，并且还包括用于处理由射频电路108和/或外部端口124所接收的 数据的各种软件部件。外部端口124(例如，通用串行总线(USB)、火 线等)适于直接耦接到其他设备或者间接地通过网络(例如，因特网、 无线LAN等)耦接。在一些实施例中，外部端口是与iPod(Apple Inc. 的商标)设备上所使用的30针连接器相同的或类似的以及/或者与其兼 容的多针(例如，30针)连接器。

接触/运行模块130任选地检测与触摸屏112(结合显示控制器 156)和其他触敏设备(例如，触摸板或物理点击轮)的接触。接触/运 动模块130包括各种软件部件以用于执行与接触的检测相关的各种操 作，诸如确定是否已经发生了接触(例如，检测手指向下事件)、确定 接触的强度(例如，接触的力或压力，或者接触的力或压力的替代 物)、确定是否存在接触的移动并且跟踪在触敏表面上的移动(例如， 检测一个或多个手指拖动事件)，以及确定接触是否已经停止(例如， 检测手指向上事件或者接触断开)。接触/运动模块130从触敏表面接 收接触数据。确定接触的移动任选地包括确定接触的速率(量值)、速 度(量值和方向)和/或加速度(量值和/或方向的改变)，接触的移动 由一系列接触数据来表示。这些操作任选地被应用于单个接触(例如， 一个手指接触)或多个同时接触(例如，“多触摸”/多个手指接 触)。在一些实施例中，接触/运动模块130和显示控制器156检测触 摸板上的接触。

在一些实施例中，接触/运动模块130使用一组一个或多个强度阈 值来确定操作是否已经由用户执行(例如，确定用户是否已经“点击” 图标)。在一些实施例中，根据软件参数来确定强度阈值的至少一个子 组(例如，强度阈值不是由特定物理致动器的激活阈值来确定，并且可 在不改变设备100的物理硬件的情况下被调整)。例如，在不改变触控 板或触摸屏显示器硬件的情况下，触控板或触摸屏的鼠标“点击”阈值 可被设定成预定义的阈值的大范围中的任一个。另外，在一些具体实施 中，向设备的用户提供用于调整强度阈值组中的一个或多个(例如，通 过调整各个强度阈值和/或通过利用对“强度”参数的系统级点击一次 调整多个强度阈值)的软件设置。

接触/运动模块130任选地检测用户的手势输入。触敏表面上的不 同手势具有不同接触图案和强度。因此，任选地通过检测具体接触图案 来检测手势。例如，检测到单指轻击手势包括检测到手指按下事件、然 后在与手指按下事件相同的位置(或基本上相同的位置)处(例如，在 图标位置处)检测到手指抬起(抬离)事件。又如，在触敏表面上检测 到手指轻扫手势包括检测到手指按下事件、然后检测到一个或多个手指 拖动事件、并且随后检测到手指抬起(抬离)事件。

图形模块132包括用于在触摸屏112或其他显示器上展示和显示图 形的各种已知软件部件，包括用于改变所显示的图形的视觉冲击(例 如，亮度、透明度、饱和度、对比度或其他视觉特性)的部件。如本文 所用，术语“图形”包括可被显示给用户的任何对象，非限制性地包括 文本、网页、图标(诸如包括软按键的用户界面对象)、数字图像、视 频、动画等等。

在一些实施例中，图形模块132存储要使用的数据表示图形。每个 图形任选地被分配有对应的代码。图形模块132从应用程序等接收指定 要显示的图形的一个或多个代码，在必要的情况下还一起接收坐标数据 和其他图形属性数据，并且然后生成屏幕图像数据来输出给显示控制器 156。

触觉反馈模块133包括用于生成指令的各种软件部件，这些指令由 触觉输出发生器167使用，以便响应于用户与设备100的交互而在设备 100上的一个或多个位置处产生触觉输出。

任选地为图形模块132的部件的文本输入模块134提供用于在各种 应用程序(例如，联系人137、电子邮件140、IM 141、浏览器147和 需要文本输入的任何其他应用程序)中输入文本的软键盘。

GPS模块135确定了设备的位置并提供了用于各种应用程序的这些 信息(例如，提供至用于基于位置的拨号的电话138，提供至相机143 作为图片/视频元数据，以及提供至用于提供基于位置的服务诸如天气 桌面小程序、当地黄页桌面小程序和地图/导航桌面小程序的应用程 序)。

应用程序136任选地包括以下模块(或指令集)、或者其子组或超 集：

·联系人模块137(有时叫做通讯录或联系人列表)；

·电话模块138；

·视频会议模块139；

·电子邮件客户端模块140；

·即时消息(IM)模块141；

·健身支持模块142；

·用于静止图像和/或视频图像的相机模块143；

·图像管理模块144；

·浏览器模块147；

·日历模块148；

·桌面小程序模块149，其任选地包括以下一者或多者：天气桌面 小程序149-1、股市桌面小程序149-2、计算器桌面小程序149- 3、闹钟桌面小程序149-4、词典桌面小程序149-5、由用户获取 的其他桌面小程序以及用户创建的桌面小程序149-6；

·桌面小程序创建者模块150，其用于形成用户创建的桌面小程序 149-6；

·搜索模块151；

·视频和音乐播放器模块152，其任选地由视频播放器模块和音乐 播放器模块构成；

·便笺模块153；

·地图模块154；和/或

·在线视频模块155。

任选地存储在存储器102中的其他应用程序136的示例包括其他文 字处理应用程序、其他图像编辑应用程序、画图应用程序、呈现应用程 序、JAVA启用的应用程序、加密、数字权益管理、声音识别和声音复 制。

结合触摸屏112、显示控制器156、接触模块130、图形模块132 和文本输入模块134，联系人模块137任选地用于管理通讯录或联系人 列表(例如，存储在存储器102或存储器370中的联系人模块137的应 用程序内部状态192中)，包括：添加姓名到通讯录；从通讯录删除姓 名；将电话号码、电子邮件地址、实际地址或其他信息与姓名关联；将 图像与姓名关联；对姓名进行分类和归类；提供电话号码或电子邮件地 址来发起和/或促进通过电话138、视频会议139、电子邮件140或IM  141的通信；等等。

结合射频电路108、音频电路110、扬声器111、麦克风113、触 摸屏112、显示控制器156、接触模块130、图形模块132和文本输入 模块134，电话模块138任选地被用于输入对应于电话号码的字符序 列、访问通讯录137中的一个或多个电话号码、修改已经输入的电话号 码、拨打相应的电话号码、进行对话以及当对话完成时断开或挂断。如 上所述，无线通信任选地使用多种通信标准、协议和技术中的任一种。

结合射频电路108、音频电路110、扬声器111、麦克风113、触 摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、 接触模块130、图形模块132、文本输入模块134、联系人列表137和 电话模块138，视频会议模块139包括用于根据用户指令发起、进行和 结束用户与一个或多个其他参与方之间的视频会议的可执行指令。

结合射频电路108、触摸屏112、显示控制器156、接触模块 130、图形模块132和文本输入模块134，电子邮件客户端模块140包 括用于响应于用户指令来创建、发送、接收和管理电子邮件的可执行指 令。结合图像管理模块144，电子邮件客户端模块140使得非常容易创 建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。

结合射频电路108、触摸屏112、显示控制器156、接触模块 130、图形模块132和文本输入模块134，即时消息模块141包括用于 输入对应于即时消息的字符序列、修改先前输入的字符、传输相应即时 消息(例如，使用短消息服务(SMS)或多媒体消息服务(MMS)协议用于 基于电话的即时消息或者使用XMPP、SIMPLE、或IMPS用于基于因 特网的即时消息)、接收即时消息以及查看所接收的即时消息的可执行 指令。在一些实施例中，所传输和/或接收的即时消息任选地包括图 形、相片、音频文件、视频文件和/或MMS和/或增强消息服务(EMS) 中所支持的其他附件。如本文所用，“即时消息”是指基于电话的消息 (例如，使用SMS或MMS发送的消息)和基于互联网的消息(例 如，使用XMPP、SIMPLE、或IMPS发送的消息)二者。

结合射频电路108、触摸屏112、显示控制器156、接触模块 130、图形模块132、文本输入模块134、GPS模块135、地图模块154 和音乐播放器模块146，健身支持模块142包括可执行指令以创建健身 (例如，具有时间、距离和/或卡路里燃烧目标)；与健身传感器(运 动设备)进行通信；接收健身传感器数据；校准用于监视健身的传感 器；选择和播放用于健身的音乐；以及显示、存储和传输健身数据。

结合触摸屏112、显示控制器156、光学传感器164、光学传感器 控制器158、接触模块130、图形模块132和图像管理模块144，相机 模块143包括用于捕获静态图像或视频(包括视频流)并且将它们存储 到存储器102中、修改静态图像或视频的特性、或从存储器102删除静 态图像或视频的可执行指令。

结合触摸屏112、显示控制器156、接触模块130、图形模块 132、文本输入模块134和相机模块143，图像管理模块144包括用于 排列、修改(例如，编辑)、或以其他方式操控、加标签、删除、展示 (例如，在数字幻灯片或相册中)以及存储静态图像和/或视频图像的 可执行指令。

结合射频电路108、触摸屏112、显示系统控制器156、接触模块 130、图形模块132和文本输入模块134，浏览器模块147包括用于根 据用户指令浏览因特网(包括搜索、链接到、接收和显示网页或其部分 以及链接到网页的附件和其他文件)的可执行指令。

结合射频电路108、触摸屏112、显示系统控制器156、接触模块 130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏 览器模块147，日历模块148包括可执行指令以根据用户指令来创建、 显示、修改和存储日历以及与日历相关联的数据(例如，日历条目、待 办事项等)。

结合射频电路108、触摸屏112、显示系统控制器156、接触模块 130、图形模块132、文本输入模块134和浏览器模块147，桌面小程序 模块149是任选地由用户下载和使用的微型应用程序(例如，天气桌面 小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟 桌面小程序149-4和词典桌面小程序149-5)或由用户创建的微型应用 程序(例如，用户创建的桌面小程序149-6)。在一些实施例中，桌面 小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件 和JavaScript文件。在一些实施例中，桌面小程序包括XML(可扩展 标记语言)文件和JavaScript文件(例如，Yahoo！桌面小程序)。

结合射频电路108、触摸屏112、显示系统控制器156、接触模块 130、图形模块132、文本输入模块134和浏览器模块147，桌面小程序 创建者模块150任选地被用户用来创建桌面小程序(例如，将网页的用 户指定部分转到桌面小程序中)。

结合触摸屏112、显示系统控制器156、接触模块130、图形模块 132和文本输入模块134，搜索模块151包括可执行指令以根据用户指 令来搜索匹配一个或多个搜索条件(例如，一个或多个用户指定的搜索 词)的存储器102中的文本、音乐、声音、图像、视频和/或其他文 件。

结合触摸屏112、显示系统控制器156、接触模块130、图形模块 132、音频电路110、扬声器111、射频电路108和浏览器模块147，视 频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格 式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可 执行指令，以及用于显示、呈现或以其他方式回放视频(例如，在触摸 屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。 在一些实施例中，设备100任选地包括MP3播放器，诸如iPod(Apple  Inc.的商标)的功能。

结合触摸屏112、显示控制器156、接触模块130、图形模块132 和文本输入模块134，便笺模块153包括用于根据用户指令创建和管理 便笺、待办任务清单等的可执行指令。

结合射频电路108、触摸屏112、显示系统控制器156、接触模块 130、图形模块132、文本输入模块134、GPS模块135和浏览器模块 147，地图模块154任选地用于根据用户指令接收、显示、修改和存储 地图以及与地图相关联的数据(例如，驾驶方向；特定位置处或附近的 商店和其他兴趣点的数据；以及其他基于位置的数据)。

结合触摸屏112、显示系统控制器156、接触模块130、图形模块 132、音频电路110、扬声器111、射频电路108、文本输入模块134、 电子邮件客户端模块140和浏览器模块147，在线视频模块155包括指 令，该指令允许用户访问、浏览、接收(例如，通过流媒体和/或下 载)、播放(例如在通过外部端口124所连接的触摸屏上或外部显示器 上)、发送具有链接的电子邮件至特定的在线视频，以及以其他方式管 理一种或多种文件格式诸如H.264的在线视频。在一些实施例中，即时 消息模块141而不是电子邮件客户端模块140用于发送链接至特定的在 线视频。

上述每个模块和应用程序对应于用于执行上述一种或多种功能以 及在本申请中所介绍的方法(例如，本文中所描述的计算机实现的方法 和其他信息处理方法)的一组可执行指令。这些模块(即指令集)不必 被实现为分开的软件程序、过程或模块，因此这些模块的各种子组任选 地在各种实施例中被组合或以其他方式重新布置。在一些实施例中，存 储器102任选地存储上述模块和数据结构的子组。此外，存储器102任 选地存储上面没有描述的另外的模块和数据结构。

在一些实施例中，设备100是这样一种设备，即在该设备上预定义 的一组功能的操作唯一地通过触摸屏和/或触摸板来执行。通过使用触 摸屏和/或触摸板作为用于设备100的操作的主要输入控制设备，任选 地减少设备100上的物理输入控制设备(诸如下压按钮、拨号盘等等) 的数量。

唯一地通过触摸屏和/或触摸板执行的该预定义的一组功能任选地 包括用户界面之间的导航。在一些实施例中，触摸板在被用户触摸时将 设备100从显示在设备100上的任何用户界面导航到主菜单、主屏幕或 根菜单。在此类实施例中，使用触控板来实现“菜单按钮”。在一些其 他实施例中，菜单按钮是物理下压按钮或者其他物理输入控制设备，而 不是触摸板。

图1B是示出根据一些实施例的用于事件处理的示例性部件的框 图。在一些实施例中，存储器102(图1A中)或存储器370(图3)包 括事件分类器170(例如，在操作系统126中)以及相应的应用程序 136-1(例如，前述应用程序137-151、155、380-390中的任一者)。

事件分类器170接收事件信息并确定要将事件信息递送到的应用程 序136-1和应用程序136-1的应用程序视图191。事件分类器170包括 事件监视器171和事件分配器模块174。在一些实施例中，应用程序 136-1包括应用程序内部状态192，该应用程序内部状态192指示当应 用程序是活动的或正在执行时显示在触敏显示器112上的当前应用程序 视图。在一些实施例中，设备/全局内部状态157被事件分类器170用 来确定哪个(哪些)应用程序当前是活动的，并且应用程序内部状态 192被事件分类器170用来确定要将事件信息递送到的应用程序视图 191。

在一些实施例中，应用程序内部状态192包括附加信息，诸如以下 各项中的一者或多者：当应用程序136-1恢复执行时将被使用的恢复信 息、指示正通过应用程序136-1显示的信息或准备好用于通过应用程序 136-1显示的信息的用户界面状态信息、用于使得用户能够返回到应用 程序136-1的前一状态或视图的状态队列，以及用户采取的先前动作的 重复/撤销队列。

事件监视器171从外围设备接口118接收事件信息。事件信息包括 关于子事件(例如，用户接触触敏显示器112，作为多点接触手势的一 部分)的信息。外围设备接口118传输其从I/O子系统106或传感器 (诸如是接近传感器166)、加速度计168和/或麦克风113(通过音频 电路110)所接收的信息。外围设备接口118从I/O子系统106接收的 信息包括来自触敏显示器112或触敏表面的信息。

在一些实施例中，事件监视器171以预先确定的间隔发送请求给外 围设备接口118。作为响应，外围设备接口118传输事件信息。在其他 实施例中，外围设备接口118仅当存在显著事件(例如，接收到高于预 先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输 入)时传输事件信息。

在一些实施例中，事件分类器170还包括命中视图确定模块172和 /或活动事件识别器确定模块173。

当触敏显示器112显示多于一个视图时，命中视图确定模块172提 供用于确定子事件已经在一个或多个视图内的什么地方发生了的软件过 程。视图由用户在显示器上可以看到的控件和其他元件构成。

与应用程序相关联的用户界面的另一方面是一组视图，本文中有 时也称为应用程序视图或用户界面窗口，在其中显示信息以及发生基于 触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任 选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例 如，在其中检测到触摸的最低水平视图任选地被叫做命中视图，并且被 识别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来 确定，该初始触摸始于基于触摸的手势。

命中视图确定模块172接收与基于触摸的手势的子事件相关的信 息。当应用程序具有在分级结构中组织的多个视图时，命中视图确定模 块172将命中视图识别为分级结构中的最低视图，该分级结构应对子事 件进行处理。在大多数情形中，命中视图是发起子事件(即形成事件或 潜在事件的子事件序列中的第一个子事件)在其中发生的最低水平视 图。一旦命中视图被命中视图确定模块识别，命中视图通常接收与其被 识别为命中视图所针对的同一触摸或输入源相关的所有子事件。

活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视 图应该接收特定序列的子事件。在一些实施例中，活动事件识别器确定 模块173确定仅命中视图应该接收特定序列的子事件。在其他实施例 中，活动事件识别器确定模块173确定包括子事件的物理位置的所有视 图是活跃参与的视图，因此确定所有活跃参与的视图应接收特定序列的 子事件。在其他实施例中，即使触摸子事件完全被局限到与一特定视图 相关联的区域，分级结构中更高的视图将仍然保持为活跃参与的视图。

事件分配器模块174将事件信息分配到事件识别器(例如，事件识 别器180)。在包括活动事件识别器确定模块173的实施例中，事件分 配器模块174将事件信息递送到由活动事件识别器确定模块173所确定 的事件识别器。在一些实施例中，事件分配器模块174在事件队列中存 储事件信息，事件信息由相应事件接收器模块182检索。

在一些实施例中，操作系统126包括事件分类器170。或者，应用 程序136-1包括事件分类器170。在另一实施例中，事件分类器170是 独立的模块，或者是存储在存储器102中的另一模块(诸如接触/运动 模块130)的一部分。

在一些实施例中，应用程序136-1包括多个事件处理程序190和一 个或多个应用程序视图191，其中每个都包括用于处理发生在应用程序 的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应 用程序视图191包括一个或多个事件识别器180。通常，相应应用程序 视图191包括多个事件识别器180。在其他实施例中，事件识别器180 中的一个或多个是独立模块的一部分，独立模块诸如是用户界面工具包 (未示出)或应用程序136-1从中继承方法和其他特性的更高水平对 象。在一些实施例中，相应事件处理程序190包括以下中的一者或多 者：数据更新器176、对象更新器177、GUI更新器178、和/或从事件 分类器170接收的事件数据179。事件处理程序190任选地利用或调用 数据更新器176、对象更新器177或GUI更新器178来更新应用程序内 部状态192。或者，应用程序视图191中的一个或多个包括一个或多个 相应事件处理程序190。另外，在一些实施例中，数据更新器176、对 象更新器177和GUI更新器178中的一者或多者被包括在相应应用程 序视图191中。

相应的事件识别器180从事件分类器170接收事件信息(例如，事 件数据179)，并且从事件信息来标识事件。事件识别器180包括事件 接收器182和事件比较器184。在一些实施例中，事件识别器180还包 括以下各项的至少子组：元数据183和事件递送指令188(任选地包括 子事件递送指令)。

事件接收器182从事件分类器170接收事件信息。事件信息包括关 于子事件的信息，例如触摸或触摸移动。根据子事件，事件信息还包括 附加信息，诸如子事件的位置。当子事件涉及触摸的移动时，事件信息 任选地还包括子事件的速率和方向。在一些实施例中，事件包括设备从 一个取向旋转到另一个取向(例如，从纵向取向旋转到横向趋向，反之 亦然)，并且事件信息包括关于设备的当前取向(也被叫做设备姿态) 的相应信息。

事件比较器184将事件信息与预定义的事件或子事件定义进行比 较，并且基于该比较来确定事件或子事件、或者确定或更新事件或子事 件的状态。在一些实施例中，事件比较器184包括事件定义186。事件 定义186包含事件的定义(例如，预定义序列的子事件)，例如事件1 (187-1)、事件2(187-2)以及其他。在一些实施例中，事件187中的子事 件包括例如触摸开始、触摸结束、触摸移动、触摸取消和多个触摸。在 一个示例中，事件1(187-1)的定义是在被显示对象上的双击。例如，该 双击包括在被显示的对象上的预先确定的阶段的第一次触摸(触摸开 始)、预先确定的阶段的第一次抬起(触摸结束)、在该被显示的对象 上的预先确定的阶段的第二次触摸(触摸开始)以及预先确定的阶段的 第二次抬起(触摸结束)。在另一个示例中，事件2(187-2)的定义是在 被显示对象上的拖动。例如，拖动包括用于预先确定的阶段的在一个被 显示的对象上的接触(或接触)，在触敏显示器112上的接触运动，以 及接触的抬起(接触结束)。在一些实施例中，事件还包括用于一个或 多个相关联事件处理程序190的信息。

在一些实施例中，事件定义187包括用于相应用户界面对象的事件 的定义。在一些实施例中，事件比较器184执行命中测试，以确定哪个 用户界面对象与子事件相关联。例如，在其中在触摸显示器112上显示 三个用户界面对象的应用程序视图中，当在触敏显示器112上检测到触 摸时，事件比较器184执行命中测试，以确定这三个用户界面对象中哪 一个与该触摸(子事件)相关联。如果每个所显示的对象与相应的事件 处理程序190相关联，则事件比较器使用该命中测试的结果来确定哪个 事件处理程序190应该被激活。例如，事件比较器184选择与触发该命 中测试的对象和子事件相关联的事件处理程序。

在一些实施例中，相应事件187的定义还包括延迟动作，延迟动作 延迟事件信息的递送，直到已经确定子事件序列是否确实对应于事件识 别器的事件类型之后。

当相应事件识别器180确定一连串子事件不与事件定义186中的任 何事件匹配，则该相应事件识别器180进入事件不可能、事件失败或事 件结束状态，然后其不理会基于触摸的手势的后续子事件。在这种情况 下，保持活动以用于点击视图的其他事件识别器(如果有的话)继续跟 踪和处理持续的基于接触的手势的子事件。

在一些实施例中，相应事件识别器180包括具有指示事件递送系统 应该如何执行对活跃参与的事件识别器的子事件递送的能配置的属性、 标志和/或列表的元数据183。在一些实施例中，元数据183包括指示事 件识别器彼此如何交互或如何能够交互的能配置的属性、标志和/或列 表。在一些实施例中，元数据183包括指示子事件是否被递送到视图或 程序化分级结构中变化的水平的能配置的属性、标记和/或列表。

在一些实施例中，当事件的一个或多个特定子事件被识别时，相 应事件识别器180激活与事件相关联的事件处理程序190。在一些实施 例中，相应事件识别器180将与该事件相关联的事件信息递送到事件处 理程序190。激活事件处理程序190不同于发送(和延期发送)子事件 到相应的命中视图。在一些实施例中，事件识别器180抛出与所识别的 事件相关联的标志，并且与该标志相关联的事件处理程序190接到该标 志并执行预定义的过程。

在一些实施例中，事件递送指令188包括递送关于子事件的事件信 息而不激活事件处理程序的子事件递送指令。相反，子事件递送指令将 事件信息递送到与一连串子事件相关联的事件处理程序或者递送到活跃 参与的视图。与该一连串子事件或与活跃参与的视图相关联的事件处理 程序接收事件信息，并执行预先确定的过程。

在一些实施例中，数据更新器176创建并更新在应用程序136-1中 使用的数据。例如，数据更新器176更新在联系人模块137中使用的电 话号码，或者存储在视频播放器模块145中使用的视频文件。在一些实 施例中，对象更新器177创建并更新在应用程序136-1中使用的对象。 例如，对象更新器176创建新的用户界面对象，或者更新用户界面对象 的位置。GUI更新器178更新GUI。例如，GUI更新器178准备显示信 息并将其发送至图形模块132以用于显示在触敏显示器上。

在一些实施例中，事件处理程序190包括或者具有对数据更新器 176、对象更新器177和GUI更新器178的访问权限。在一些实施例 中，数据更新器176、对象更新器177和GUI更新器178被包括在相应 的应用程序136-1或应用程序视图191的单个模块中。在其他实施例 中，它们被包括在两个或更多个软件模块中。

应当理解，上述关于触敏显示器上的用户触摸的事件处理的讨论 还适用于利用输入设备操作多功能设备100的其他形式的用户输入，并 不是所有用户输入都是在触摸屏上发起的。例如，任选地与单次或多次 键盘按下或按住协作的鼠标移动和鼠标按钮按下；触摸板上的接触移 动，诸如轻击、拖动、滚动等；触笔输入；设备的移动；口头指令；检 测到的眼睛移动；生物特征输入；和/或它们的任何组合任选地被用作 对应于限定待识别的事件的子事件的输入。

图2示出根据一些实施例的具有触摸屏112的一种便携式多功能设 备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在 该实施例中，以及在下文中介绍的其他实施例中，用户能够通过例如用 一根或多根手指202(在附图中没有按比例绘制)或者用一个或多个触 笔203(在附图中没有按比例绘制)在图形上作出手势来选择这些图形 中的一个或多个。在一些实施例中，当用户中断与该一个或多个图形的 接触时，发生对一个或多个图形的选择。在一些实施例中，手势任选地 包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和 /或向下)和/或已经与设备100接触的手指的拨动(从右向左、从左向 右、向上和/或向下)。在一些具体实施中或在一些情况下，不经意地 与图形接触不会选择图形。例如，当对应于选择的手势是轻击时，在应 用程序图标之上扫动的轻扫手势任选地不会选择相应的应用程序。

设备100任选地还包括一个或多个物理按钮，诸如“主屏幕”或菜 单按钮204。如前所述，菜单按钮204任选地用于导航到任选地在设备 100上被执行的一组应用程序中的任何应用程序136。或者，在一些实 施例中，菜单按钮被实现为显示在触摸屏112上的GUI中的软键。

在一个实施例中，设备100包括触摸屏112、菜单按钮204、用于 设备开关机和锁定设备的下压按钮206、(一个或多个)音量调节按钮 208、用户身份模块(SIM)卡槽210、耳麦插孔212和对接/充电外部端口 124。下压按钮206任选地用于通过压下该按钮并且将该按钮保持在压 下状态达预定义的时间间隔来对设备进行开关机；通过压下该按钮并在 经过该预定义的时间间隔之前释放该按钮来锁定设备；以及/或者解锁 设备或发起解锁过程。在另选的实施例中，设备100还通过麦克风113 接受用于激活或解除激活某些功能的言语输入。设备100还任选地包括 用于检测触摸屏112上的接触的强度的一个或多个接触强度传感器 165，和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出 发生器167。

图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设 备的框图。设备300不必是便携式的。在一些实施例中，设备300是膝 上型计算机、台式计算机、平板电脑、多媒体播放器设备、导航设备、 教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如，家用或 工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、 一个或多个网络或其他通信接口360、存储器370和用于使这些部件互 连的一根或多根通信总线320。通信总线320任选地包括使系统部件互 连并且控制系统部件之间的通信的电路(有时叫做芯片组)。设备300 包括具有显示器340的输入/输出(I/O)接口330，显示器340通常是触摸 屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设 备)350和触控板355、用于在设备300上生成触觉输出的触觉输出发 生器357(例如，类似于以上参考图1A所述的触觉输出发生器 167)、传感器359(例如，光学传感器、加速度传感器、接近传感 器、触敏传感器、和/或类似于以上参考图1A所述的接触强度传感器 165的接触强度传感器)。存储器370包括高速随机存取存储器，诸如 DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备；并且任 选地包括非易失性存储器，诸如一个或多个磁盘存储设备、光盘存储设 备、闪存存储器设备、或其他非易失性固态存储设备。存储器370任选 地包括远离CPU 310定位的一个或多个存储设备。在一些实施例中， 存储器370存储与便携式多功能设备100(图1A)的存储器102中所 存储的程序、模块和数据结构类似的程序、模块和数据结构，或它们的 子组。此外，存储器370任选地存储便携式多功能设备100的存储器 102中不存在的另外的程序、模块和数据结构。例如，设备300的存储 器370任选地存储画图模块380、呈现模块382、文字处理模块384、 网站创建模块386、盘编辑模块388和/或电子表格模块390，而便携式 多功能设备100(图1A)的存储器102任选地不存储这些模块。

图3中上述所识别的元件中的每个任选地存储在一个或多个先前提 到的存储器设备中。上述所识别的模块中的每个对应于用于执行上述功 能的一组指令。上述所识别的模块或程序(即，指令集)不必被实现为 单独的软件程序、过程或模块，并且因此这些模块的各种子组任选地在 各种实施例中被组合或以其他方式重新布置。在一些实施例中，存储器 370任选地存储上述模块和数据结构的子组。此外，存储器370任选地 存储上面未描述的另外的模块和数据结构。

现在将注意力转到任选地在便携式多功能设备100上实现的用户界 面(“UI”)的实施例。

图4A示出根据一些实施例的便携式多功能设备100上用于应用程 序菜单的一种示例性用户界面。类似的用户界面任选地在设备300上实 现。在一些实施例中，用户界面400包括以下元素或者其子组或超集：

·信号强度指示器402，其用于无线通信诸如蜂窝信号和Wi-Fi信 号；

·时间404；

·蓝牙指示器405；

·电池状态指示器406；

·托盘408，其具有频繁使用的应用程序的图标，所述图标诸如：

·电话模块138的标记“电话”的图标416，该图标416任选地包 括未接来电或语音留言的数量的指示器414；

·电子邮件客户端模块140的标记“邮件”的图标418，该图标 418任选地包括未读电子邮件的数量的指示器410；

·浏览器模块147的标记“浏览器”的图标420；和

·视频和音乐播放器模块152(也叫做iPod(Apple Inc.的商标) 模块152)的标记“iPod”的图标422；以及

·其他应用程序的图标，诸如：

·IM模块141的标记“文本”的图标424；

·日历模块148的标记“日历”的图标426；

·图像管理模块144的标记“相片”的图标428；

·相机模块143的标记“相机”的图标430；

·在线视频模块155的标记“在线视频”的图标432；

·股市桌面小程序149-2的标记“股市”的图标434；

·地图模块154的标记“地图”的图标436；

·天气桌面小程序149-1的标记“天气”的图标438；

·闹钟桌面小程序149-4的标记“时钟”的图标440；

·健身支持模块142的标记“健身支持”的图标442；

·便笺模块153的标记“便笺”的图标444；以及

·设置应用程序或模块的图标446，该图标446提供对设备100及 其各种应用程序136的设置的访问；

应当指出的是，图4A中示出的图标标签仅仅是示例性的。例如， 视频和音乐播放器模块152的图标422被标记“音乐”或“音乐播放 器”。其他标签任选地用于各种应用程序图标。在一些实施例中，相应 的应用程序图标的标签包括对应于该相应的应用程序图标的应用程序的 名称。在一些实施例中，特定的应用程序图标的标签不同于对应于该特 定的应用程序图标的应用程序的名称。

图4B示出具有与显示器450(例如，触摸屏显示器112)分开的 触敏表面451(例如，图3中的平板或触控板355)的设备(例如，图 3中的设备300)上的示例性用户界面。设备300还任选地包括用于检 测触敏表面451上的接触的强度的一个或多个接触强度传感器(例如， 传感器357中的一个或多个)，和/或用于为设备300的用户生成触觉 输出的一个或多个触觉输出发生器359。

尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上 的输入给出随后的示例中的一些，但是在一些实施例中，设备检测与显 示器分开的触敏表面上的输入，如图4B中所示。在一些实施例中，触 敏表面(例如，图4B中的451)具有与显示器(例如，450)上的主轴 (例如，图4B中的453)对应的主轴(例如，图4B中的452)。根据 这些实施例，设备检测在与显示器上的相应位置对应的位置(例如，在 图4B中，460对应于468并且462对应于470)处与触敏表面451的接 触(例如，图4B中的460和462)。这样，在触敏表面(例如，图4B 中的451)与多功能设备的显示器(图4B中的450)分开时，由设备 在触敏表面上检测到的用户输入(例如，接触460和462以及它们的移 动)被该设备用于操纵显示器上的用户界面。应当理解，类似的方法任 选地用于本文所述的其他用户界面。

另外，虽然主要是参考手指输入(例如，手指接触、手指轻击手 势、手指轻扫手势)来给出下面的示例，但是应当理解的是，在一些实 施例中，这些手指输入中的一个或多个由来自另一输入设备的输入(例 如，基于鼠标的输入或触笔输入)替代。例如，轻扫手势任选地由鼠标 点击(例如，而不是接触)、之后是光标沿着轻扫的路径的移动(例 如，而不是接触的移动)替代。又如，轻击手势任选地由光标位于轻击 手势的位置之上时的鼠标点击(例如，而不是对接触的检测、之后是终 止检测接触)替代。类似地，当同时检测到多个用户输入时，应当理解 的是，多个电脑鼠标任选地被同时使用，或一个鼠标和多个手指接触任 选地被同时使用。

如本文所用，术语“焦点选择器”是指输入元件，其指示用户正 与之交互的用户界面的当前部分。在包括光标或其他位置标记的一些具 体实施中，光标充当“焦点选择器”，使得当在光标位于特定用户界面 元件(例如，按钮、窗口、滑块或其他用户界面元件)上方时在触敏表 面(例如，图3中的触摸板355或图4B中的触敏表面451)上检测到 输入(例如，按压输入)时，根据所检测到的输入调整该特定用户界面 元件。在包括实现与触摸屏显示器上的用户界面元件的直接交互的触摸 屏显示器(例如，图1A中的触敏显示器系统112或图4A中的触摸屏 112)的一些具体实施中，触摸屏上所检测到的接触充当“焦点选择 器”，使得当在触摸屏显示器上在特定用户界面元件(例如，按钮、窗 口、滑块或其他用户界面元件)的位置处检测到输入(例如，通过接触 的按压输入)时，根据所检测到的输入来调整该特定用户界面元件。在 一些具体实施中，将焦点从用户界面的一个区域移动到用户界面的另一 个区域而无需光标的对应移动或接触在触摸屏显示器上的移动(例如， 通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮)；在这 些具体实施中，焦点选择器根据焦点在用户界面的不同区域之间的移动 而移动。不考虑焦点选择器所采取的特定形式，焦点选择器通常是用户 界面元件(或触摸屏显示器上的接触)，其由用户控制以便传送用户与 用户界面的预期交互(例如，通过向设备指示用户正打算与之交互的用 户界面的元件)。例如，当在触敏表面(例如，触摸板或触摸屏)上检 测到按压输入时焦点选择器(例如，光标、接触或选择框)在相应按钮 之上的位置将指示用户正打算激活该相应按钮(与设备的显示器上所示 的其他用户界面元件相反)。

下文描述的用户界面图包括各种强度图表，其示出触敏表面上的 接触相对于一个或多个强度阈值(例如，接触检测强度阈值IT₀、轻按 压强度阈值IT_L、深按压强度阈值IT_D、和/或一个或多个其他强度阈 值)的当前强度。该强度图通常不是所显示的用户界面的一部分，但是 被提供以帮助解释所述图。在一些实施例中，轻按压强度阈值对应于如 下强度，在该强度下设备将执行通常与点击物理鼠标或触控板的按钮相 关联的操作。在一些实施例中，深按压强度阈值对应于如下强度，在该 强度下设备将执行跟通常与点击物理鼠标或触控板的按钮相关联的操作 不同的操作。在一些实施例中，当检测到强度低于轻按压强度阈值(例 如，并且高于标称接触检测强度阈值IT₀，比该阈值低的接触不再被检 测到)的接触时，设备将根据接触在触敏表面上的移动来移动焦点选择 器而不执行与轻按压强度阈值或深按压强度阈值相关联的操作。一般来 讲，除非另有陈述，否则这些强度阈值在不同组用户界面图之间是一致 的。

接触的强度从低于轻按压强度阈值IT_L的强度增大到介于轻按压强 度阈值IT_L与深按压强度阈值IT_D之间的强度，有时称为“轻按压”输 入。接触的强度从低于深按压强度阈值IT_D的强度增大到高于深按压强 度阈值IT_D的强度，有时称为“深按压”输入。接触的强度从低于接触 检测强度阈值IT₀的强度增大到介于接触检测强度阈值IT₀与轻按压强 度阈值IT_L之间的强度，有时称为检测到触敏表面上的接触。接触的强 度从高于接触检测强度阈值IT₀的强度减小到低于接触强度阈值IT₀的 强度，有时称为检测到接触从触摸表面的抬离。在一些实施例中，IT₀为零。在一些实施例中，IT₀大于零。在一些图示中，阴影圆或椭圆用 于表示触敏表面上的接触的强度。在一些图示中，没有阴影的圆或椭圆 用于表示触敏表面上的相应接触而不指定相应接触的强度。

在本文中所描述的一些实施例中，响应于检测到包括相应按压输 入的手势或响应于检测到用相应接触(或多个接触)执行的相应按压输 入而执行一个或多个操作，其中至少部分地基于检测到该接触(或多个 接触)的强度增大到高于按压输入强度阈值而检测到相应按压输入。在 一些实施例中，响应于检测到相应接触的强度增大到高于按压输入强度 阈值(例如，相应按压输入的“下行冲程”)而执行相应操作。在一些 实施例中，按压输入包括相应接触的强度增大到高于按压输入强度阈值 以及该接触的强度随后减小到低于按压输入强度阈值，并且响应于检测 到相应接触的强度随后减小到低于按压输入阈值(例如，相应按压输入 的“上行冲程”)而执行相应操作。

在一些实施例中，设备采用强度滞后以避免有时称为“抖动”的 意外输入，其中设备限定或选择与按压输入强度阈值具有预定义关系的 滞后强度阈值(例如，滞后强度阈值比按压输入强度阈值低X个强度 单位，或滞后强度阈值是按压输入强度阈值的75％、90％或某些合理比 例)。因此，在一些实施例中，按压输入包括相应接触的强度增大到高 于按压输入强度阈值以及该接触的强度随后减小到低于对应于按压输入 强度阈值的滞后强度阈值，并且响应于检测到相应接触的强度随后减小 到低于滞后强度阈值(例如，相应按压输入的“上行冲程”)而执行相 应操作。类似地，在一些实施例中，仅在设备检测到接触的强度从处于 或低于滞后强度阈值的强度增大到处于或高于按压输入强度阈值的强 度，以及任选地接触的强度随后减小到处于或低于滞后强度的强度时才 检测到按压输入，并且响应于检测到按压输入(例如，接触的强度增大 或接触的强度减小，这取决于环境)而执行相应操作。

为了便于解释，描述的响应于与按压输入强度阈值相关联的按压 输入或响应于包括按压输入的手势而执行的操作任选地响应于检测到以 下任一者而触发：接触的强度增大到高于按压输入强度阈值、接触的强 度从低于滞后强度阈值的强度增大到高于按压输入强度阈值的强度、接 触的强度减小到低于按压输入强度阈值、和/或接触的强度减小到低于 对应于按压输入强度阈值的滞后强度阈值。另外，在其中操作被描述为 响应于检测到接触的强度减小到低于按压输入强度阈值而执行的示例 中，任选地响应于检测到接触的强度减小到低于对应于并且小于按压输 入强度阈值的滞后强度阈值而执行操作。

用户界面和相关联的过程

针对在用户界面中执行的操作提供触觉反馈

许多电子设备具有包括用户界面对象的图形用户界面。通常存在 可对界面对象执行的许多操作。例如，可将界面对象对齐到辅助线或从 辅助线移除。另一个示例是将用户界面对象(例如，文件)移进文件夹 中或移出文件夹。经常需要向用户提供有效且便利的方式以接收针对对 这些用户界面对象执行的操作的反馈。以下实施例通过向用户生成对应 于所执行操作的触觉输出来改进现有方法。

图5A-5O示出根据一些实施例的用于针对在用户界面中执行的操 作提供触觉反馈的示例性用户界面。这些附图中的用户界面用于示出下 文描述的过程，包括下文参考图6A-6C描述的过程。

图5A示出包括用户界面对象的用户界面的示例。图5A-5C中的用 户界面10200显示在设备(例如，设备300)的显示器450上并且响应 于触敏表面451上的接触(例如，手指接触)。用户界面10200包括用 户界面对象10202，并且根据一些实施例，包括对象放置辅助线 10208。图5A还示出触敏表面451上的位置10204-a处的接触10204以 及对应于接触10204的焦点选择器(例如，光标10206)的显示表示。

在一些实施例中，设备是具有独立显示器(例如，显示器450)和 独立触敏表面(例如，触敏表面451)的电子设备。在一些实施例中， 设备是便携式多功能设备100，显示器是触敏显示器系统112，并且触 敏表面包括显示器上的触觉输出发生器167(图1A)。为了便于解 释，参考图5A-5O和图6A-6C描述的实施例将参考显示器450和独立 触敏表面451来讨论，然而，类似操作响应于当在触敏显示器系统112 上显示图5A至5O所示的用户界面时在触敏显示器系统112上检测到 图5A至5O所述的接触而任选地在具有触敏显示器系统112的设备上 执行；在此类实施例中，代替光标10206，焦点选择器任选地为：相应 接触、对应于接触的代表点(例如，相应接触的质心或与相应接触相关 联的点)，或在触敏显示器系统112上检测到的两个或更多个接触的质 心。

图5A-5B示出执行包括将用户界面对象对齐到相应的对象放置辅 助线的操作的示例。在该示例中，设备检测到在触敏表面451上的接触 10204，以及接触10204从图5A中的位置10204-a到图5B中的位置 10204-b的移动10210。响应于检测到移动10210，该移动对应于将用 户界面对象10206移动到对象放置辅助线10208的对齐距离之内，设备 将用户界面对象10202对齐到对象放置辅助线10208并在触敏表面451 上生成触觉输出10211。

图5B-5C示出通过使用户界面对象从相应的对象放置辅助线脱离 来逆向图5B-5C所示操作的示例。在该示例中，设备检测到在触敏表 面451上的接触10204，以及接触10204从图5B中的位置10204-b到 图5C中的位置10204-c的移动10212。响应于检测到移动10212，该移 动对应于将用户界面对象10206移动到对象放置辅助线10208的脱对齐 距离或越过该距离，设备使用户界面对象10202从对象放置辅助线 10208脱离(例如，逆向上文参考图5A-5B描述的操作)。设备还响应 于接触10204的移动10212而在触敏表面451上生成触觉输出10213， 该移动10212对应于使用户界面对象10202从对象放置辅助线10208脱 离。

在一些实施例中，设备将图5B中的移动10210与图5C中的移动 10212之间的相应时间量与预定义的时间阈值进行比较(例如，设备确 定移动10210的结束与移动10212的开始之间的暂停时间的量值，并将 该暂停时间的量值与预定义的时间阈值进行比较)。在一些实施例中， 根据确定移动10210与移动10212之间的相应时间量(例如，暂停时 间)小于预定义的时间阈值，设备放弃生成触觉输出10211和/或触觉 输出10213。相比之下，在一些实施例中，根据确定移动10210与移动 10212之间的相应时间量(例如，暂停时间)大于预定义的时间阈值， 设备生成触觉输出10211和触觉输出10213，如上文更详细地描述。在 一些实施例中，当相应时间量小于预定义的时间阈值时，生成与执行操 作对应的触觉输出(例如，触觉输出10211)，而不生成与逆向操作对 应的触觉输出(例如，触觉输出10213)。在一些实施例中，当相应时 间量小于预定义的时间阈值时，不生成与执行操作对应的触觉输出(例 如，触觉输出10211)和与逆向操作对应的触觉输出(例如，触觉输出 10213)两者。在一些实施例中，当相应时间量小于预定义的时间阈值 时，不生成与执行操作对应的触觉输出(例如，触觉输出10211)，而 生成与逆向操作对应的触觉输出(例如，触觉输出10213)。在操作被 快速地执行和逆向时(例如，在经过预定义的时间阈值之前)放弃生成 与执行操作和逆向操作对应的一个或多个触觉输出来防止在用户意外地 执行并随后逆向操作时生成触觉输出。如果生成了这些触觉输出，则它 们有可能使用户感到困惑，或者分散用户对其他更重要的触觉和视觉反 馈的注意。鉴于此，如上所述的基于一个或多个预定义的时间阈值来选 择性地抑制(例如，放弃)生成触觉输出提供了更为有效且直观的用户 界面，从而改善在与用户界面交互时的用户体验。

图5D示出包括用户界面对象的用户界面的另一个示例。在该示例 中，图5D-5F中的用户界面10200包括用户界面对象10222和文件夹 10228，该文件夹是用来对用于删除的数据进行标记的垃圾桶文件夹。 图5D还示出触敏表面451上的位置10224-a处的接触10224以及对应 于接触10224的焦点选择器(例如，光标10206)的显示表示。

图5D-5E示出执行操作的示例。在该示例中，执行操作包括对与 用于删除的用户界面对象对应的数据进行标记。在该示例中，设备检测 到在触敏表面451上的接触10224，以及接触10224从图5D中的位置 10224-a到图5E中的位置10224-b的移动10230。响应于检测到移动 10230，设备将用户界面对象10222移动到文件夹10228上方，如图5E 所示，并且设备对与用于删除的用户界面对象10222对应的数据进行标 记并在触敏表面451上生成触觉输出10231。任选地，响应于检测到输 入诸如接触的抬离而执行对用于删除的用户界面对象的标记。

图5E-5F示出通过取消对与用于删除的用户界面对象对应的数据进 行标记来逆向图5D-5E所示操作的示例。在该示例中，设备检测到在 触敏表面451上的接触10224，以及接触10224从图5E中的位置 10224-b到图5F中的位置10224-c的移动10232。响应于检测到移动 10232，设备将用户界面对象102移动远离文件夹图标10228并取消对 与用于删除的用户界面对象10202对应的数据进行标记(例如，逆向上 文参考图5D-5E所述的数据标记操作)。设备还响应于接触10224的 移动10232而在触敏表面451上生成触觉输出10233，该移动10232对 应于取消对与用于删除的用户界面对象10222对应的数据进行标记。在 响应于检测到输入诸如接触的抬离而执行对用于删除的用户界面对象的 标记的情况下，图5F中的接触10224任选地为与图5E中的接触10224 不同的接触。

图5G示出包括用户界面对象的用户界面的另一个示例。在该示例 中，图5G-5I中的用户界面10200包括用户界面对象10242，其在该示 例中表示文件，以及文件夹10248，其表示文件系统中的目录。图5G 还示出触敏表面451上的位置10244-a处的接触10244以及对应于接触 10244的焦点选择器(例如，光标10206)的显示表示。

图5G-5H示出执行操作的另一个示例。在该示例中，所述操作包 括将文件放置在目录中。在该示例中，设备检测到在触敏表面451上的 接触10244，以及接触10244从图5G中的位置10244-a到图5H中的位 置10244-b的移动10250。响应于检测到移动10250，设备将用户界面 对象10242移动到文件夹10248上方，并且设备将由用户界面对象 10242表示的文件放置在由文件夹10248表示的目录中并在触敏表面 451上生成触觉输出10251。任选地，响应于检测到输入诸如接触的抬 离而执行将由用户界面对象表示的文件放置在文件夹中。

图5H-5I示出通过将文件从目录移除来逆向图5G-5H所示操作的 示例。在该示例中，设备检测到在触敏表面451上的接触10244，以及 接触10244从图5H中的位置10244-b到图5I中的位置10244-c的移动 10252。响应于检测到移动10252，设备将用户界面对象10242移动远 离文件夹图标10248并将由用户界面对象10242表示的文件从由文件夹 10248表示的目录移除(例如，逆向上文参考图5G-5H描述的操作)。 设备还响应于接触10244的移动10252而在触敏表面451上生成触觉输 出10253，该移动10252对应于将文件从目录移除。在响应于检测到输 入诸如接触的抬离而执行将由用户界面对象表示的文件放置在文件夹中 的情况下，图5I中的接触10244任选地为与图5H中的接触10244不同 的接触。

图5J示出包括用户界面对象的用户界面的另一个示例。在该示例 中，图5J-5L中的用户界面10200包括用户界面对象10262，其对应于 应用程序(或应用程序启动图标)，以及应用程序启动区域10268。图 5J进一步示出触敏表面451上的位置10264-a处的接触10264以及与接 触10264对应的焦点选择器(例如，光标10206)的显示表示。

图5J-5K示出执行操作的示例。在该示例中，操作包括将用户界面 对象放置在应用程序启动区域中。在该示例中，设备检测到在触敏表面 451上的接触10264，以及接触10264从图5J中的位置10264-a到图5K 中的位置10264-b的移动10270。响应于检测到移动10270，设备将用 户界面对象10262移动到应用程序启动区域10268上方并将用户界面对 象10262放置在应用程序启动区域10268中，并且在触敏表面451上生 成触觉输出10271。任选地，响应于检测到输入诸如接触的抬离而执行 将用户界面对象放置在应用程序启动区域中。

图5K-5L示出通过从应用程序启动区域移除用户界面对象来逆向 图5J-5K所示操作的示例。在该示例中，设备检测到在触敏表面451上 的接触10264，以及接触10264从图5K中的位置10264-b到图5L中的 位置10264-c的移动10272。响应于检测到移动10272，设备将用户界 面对象10262移动远离应用程序启动区域10268并将用户界面对象 10262从应用程序启动区域10268移除(例如，逆向上文参考图5J-5K 描述的操作)。设备还响应于接触10264的移动10272而在触敏表面 451上生成触觉输出10273，该移动10272对应于将用户界面对象 10262从应用程序启动区域10268移除。在响应于检测到输入诸如接触 的抬离而执行将用户界面对象放置在应用程序启动区域中的情况下，图 5L中的接触10264任选地为与图5K中的接触10264不同的接触。

图5M-5O示出用于生成触觉输出的移动轮廓的示例性波形。图 5M示出具有周期10280-1的三角形波形。图5N示出具有周期10280-2 的正方形波形，并且图5O示出具有周期10280-3的锯齿形波形。在如 上所述生成与执行操作对应的触觉输出(例如，触觉输出10211、 10231、10251或10271)或与逆向所执行操作对应的触觉输出(例如， 触觉输出10213、10233、10253或10273)时，任选地利用图5M-5O 中示出的这些移动轮廓中的一种。在一些实施例中，使用另一种波形来 生成与上文参考图5A-5L所述的不同操作对应的触觉输出。在一些实 施例中，使用相同的波形来生成与执行操作对应的触觉输出(例如，触 觉输出10211、10231、10251或10271)。在一些实施例中，使用相同 的波形来生成与逆向操作对应的触觉输出(例如，触觉输出10213、 10233、10253或10273)。在一些实施例中，使用第一波形来生成与执 行操作对应的触觉输出(例如，触觉输出10211、10231、10251或 10271)，所述第一波形不同于用于生成与逆向操作对应的触觉输出 (例如，触觉输出10213、10233、10253或10273)的第二波形。

图6A-6C是示出根据一些实施例的针对在用户界面中执行的操作 提供触觉反馈的一种方法10300的流程图。方法10300在具有显示器和 触敏表面的电子设备(例如，图3中的设备300，或图1A中的便携式 多功能设备100)处执行。在一些实施例中，显示器是触摸屏显示器， 并且触敏表面在显示器上。在一些实施例中，显示器与触敏表面是分开 的。方法10300中的一些操作被任选地组合，并且/或者一些操作的顺 序被任选地改变。

如下文所述，方法10300提供用于针对在用户界面中执行的操作提 供触觉反馈的直观方式。该方法减小当在用户界面中执行操作时用户的 认知负担，从而创建更有效的人机界面。对于电池驱动的电子设备，使 用户能够更快且更有效地在用户界面中执行操作节省了功率并且增加了 电池充电之间的时间。

设备显示(10302)用户界面对象。例如，图5A示出在图形用户界面 10200中显示的用户界面对象10202。设备检测(10304)在触敏表面上的 接触(例如，手指接触)。例如，图5A示出在触敏表面451上的位置 10204-a处的接触10204。

设备检测(10306)接触在触敏表面上的第一移动，其中所述第一移 动对应于对用户界面对象执行操作。例如，图5B示出触敏表面451上 的接触10204和随后的移动10210，该随后的移动10210对应于将用户 界面对象10202对齐到对象放置辅助线10208。响应于检测到(10310)第 一移动，设备执行(10312)操作并在触敏表面上生成(10314)第一触觉输 出。例如，图5B示出用户界面对象10202对齐到对象放置辅助线 10208以及在触敏表面451上生成的触觉输出10211。

设备检测(10316)接触在触敏表面上的第二移动，其中所述第二移 动对应于逆向进行对用户界面对象的所述操作。例如，图5C示出触敏 表面上的接触10204和随后的移动10212，该随后的移动10212对应于 使用户界面对象10202从对象放置辅助线10208脱离。

在一些实施例或情况中，接触在触敏表面上的第一移动和接触在 触敏表面上的第二移动为(10318)在未检测到接触从触敏表面抬离的情 况下执行的单个连续手势的一部分。在一些实施例中，即使在接触的移 动中存在暂停，只要该接触在触敏表面上被继续检测到，那么第一移动 和第二移动也被视为同一连续手势的一部分。在一些实施例中，如果相 同的第一移动和第二移动被检测为两个不同手势的一部分(例如，在检 测到第一移动与在检测到第二移动之间存在接触的抬离)，则响应于执 行操作和逆向所述操作两者而生成相同的触觉输出。在一些实施例中， 如果相同的第一移动和第二移动被检测为两个不同手势的一部分(例 如，在检测到第一移动与在检测到第二移动之间存在接触的抬离)，则 仍然响应于执行操作和逆向所述操作两者而生成不同的触觉输出。例 如，图5A-5C示出接触10204从位置10204-a移动到位置10204-b(图 5A-5B所示)，其对应于将用户界面对象10202对齐到对象放置辅助线 10208；随后接触10204从位置10204-b移动到位置10204-c(图5B-5C 所示)，其对应于使用户界面对象10202从对象放置辅助线10208脱对 齐。在该示例中，响应于接触10204从位置10204-a移动到位置10204- b而生成触觉输出10211，并且响应于接触10204从位置10204-b移动 到位置10204-c而生成触觉输出10213。在一些实施例中，响应于检测 到与逆向进行对相应的用户界面对象的先前操作对应的移动而生成触觉 输出10213(有时称为第二触觉输出)。在一些实施例中，响应于检测 到与对相应的用户界面对象执行不是先前操作(例如，即刻之前的操 作)的逆向的操作对应的移动而生成触觉输出10211(有时称为第一触 觉输出)。

响应于检测到(10320)第二移动，设备逆向(10322)操作。应当理 解，逆向操作未必需要执行用于执行该操作的程序的确切镜像。例如， 为了将对象对齐到辅助线，则将对象移动到在辅助线的对齐距离内的位 置，而为了将对象移动远离辅助线，检测到接触的对应于将对象移动超 出辅助线的脱对齐距离的移动即可，而不考虑接触或对象所采取的路径 具体是怎样的。例如，图5C示出用户界面对象10202从对象放置辅助 线10208脱对齐并且在触敏表面451上生成触觉输出10213，该触觉输 出10213不同于图5B所示的触觉输出10211。

在一些实施例中，执行操作包括将用户界面对象(例如，图片、 文本框、形状或某种其他可移动的用户界面对象)对齐(10324)到相 应的对象放置辅助线，而逆向操作包括使用户界面对象从相应的对象放 置辅助线脱离。在一些实施例中，将用户界面对象对齐到相应的对象放 置辅助线包括检测用户界面对象在距相应的对象放置辅助线预定义距离 内的受用户控制的移动，以及响应于检测到用户界面对象在相应的对象 放置辅助线的预定义距离内的受用户控制的移动，将相应的用户界面对 象自动地移动(例如，经由受设备控制的移动)靠近相应的对象放置辅 助线。在一些实施例中，一旦用户界面对象已被对齐到相应的对象放置 辅助线，则在预定义的前提条件得到满足之前，接触在触敏表面上的随 后移动不会引起用户界面对象的移动。特别地，在一些实施例中，使用 户界面对象从相应的对象放置辅助线脱离包括检测接触的移动，该移动 在对象未被对齐到相应的对象放置辅助线的情况下将与用户界面对象的 远离相应的对象放置辅助线超出预定义距离的受用户控制的移动对应， 以及响应于检测到接触的该移动，根据接触在触敏表面上的移动而将相 应用户界面对象自动地移动(例如，经由受设备控制的移动)到显示器 上远离相应的对象放置辅助线的位置。例如，图5A-5C示出用户界面 对象10202对齐到对象放置辅助线10208(图5A-5B)，随后用户界面 对象10202从对象放置辅助线10208脱离(图5B-5C)。

在一些实施例中，执行操作包括对与用于删除的用户界面对象对 应的数据进行标记(10326)(例如，将与文件对应的图标放置在垃圾桶 或回收文件夹中)，而逆向操作包括取消对与用于删除的用户界面对象 对应的数据进行标记(例如，从垃圾桶或回收文件夹移除/恢复与文件 对应的图标)。例如，图5D-5F示出用户界面对象10222移动到垃圾 桶文件夹10228上方并导致设备作为响应对与用于删除的用户界面对象 10222对应的数据进行标记(图5D-5E)，接着用户界面对象10222移 动远离垃圾桶文件夹10228并导致设备作为响应取消对与用于删除的用 户界面对象10222对应的数据进行标记(图5E-5F)。

在一些实施例中，用户界面对象与文件对应，执行操作包括将文 件放置(10328)在目录中，并且逆向操作包括将文件从目录移除。例 如，在一些实施例中，执行操作包括将作为文件的图形表示的用户界面 对象移动到与表示目录的文件夹图标对应的位置，并且逆向操作包括将 图标从文件夹/目录的图形表示移除。例如，图5G-5I示出与文件对应 的用户界面对象10242移动到文件夹10248上方，并导致设备作为响应 将文件放置在由文件夹10248表示的目录中(图5G-5H)，随后用户界 面对象10242移动远离文件夹10248，导致设备作为响应将文件从目录 移除(图5H-5I)。

在一些实施例中，用户界面对象与应用程序对应，执行操作包括 将用户界面对象放置(10330)在应用程序启动区域中，并且逆向操作包 括将用户界面对象从应用程序启动区域移除。应用程序启动区域的示例 包括任务栏或快速启动栏。例如，图5J-5L示出与应用程序对应的用户 界面对象10262移动到应用程序启动区域10268上方，并导致设备作为 响应将用户界面对象10262放置在应用程序启动区域10268中(图5J- 5K)，随后用户界面对象10262移动远离应用程序启动区域10268，并 导致设备作为响应将用户界面对象10262从应用程序启动区域10268移 除(图5K-5L)。

响应于检测到(10320)第二移动，除了逆向操作之外，设备还在触 敏表面上生成(10332)第二触觉输出，其中第二触觉输出不同于第一触 觉输出。作为结果，设备撤销先前执行的操作。在一些实施例中，基于 触觉输出的幅度差异，第一触觉输出不同于第二触觉输出。在一些实施 例中，第一类型的触觉输出由触敏表面的包括第一主要移动分量的移动 来生成。例如，所生成的移动与第一触觉输出的忽略任何非预期谐振的 初始脉冲对应。在一些实施例中，第二类型的触觉输出由触敏表面的包 括第二主要移动分量的移动来生成。例如，所生成的移动与第二触觉输 出的忽略任何非预期谐振的初始脉冲对应。在一些实施例中，第一主要 移动分量和第二主要移动分量具有(10334)相同的移动轮廓和不同的幅 度。例如，当第一主要移动分量和第二主要移动分量具有相同的波形形 状诸如正方形、正弦形、锯齿形或三角形以及大致相同的周期时，第一 主要移动分量和第二主要移动分量具有相同的移动轮廓。

在一些实施例中，基于触觉输出的移动轮廓的差异，第一触觉输 出不同于第二触觉输出。在一些实施例中，第一类型的触觉输出由触敏 表面的包括第一主要移动分量的移动来生成。例如，所生成的移动与第 一触觉输出的忽略任何非预期谐振的初始脉冲对应。在一些实施例中， 第二类型的触觉输出由触敏表面的包括第二主要移动分量的移动来生 成。例如，所生成的移动与第二触觉输出的忽略任何非预期谐振的初始 脉冲对应。在一些实施例中，第一主要移动分量和第二主要移动分量具 有(10336)不同的移动轮廓和相同的幅度。例如，当第一主要移动分量 和第二主要移动分量具有不同的波形形状诸如正方形、正弦形、锯齿形 或三角形和/或大致相同的周期时，第一主要移动分量和第二主要移动 分量具有不同的移动轮廓。

应当理解，图6A-6C中已进行描述的操作的特定顺序仅仅是示例 性的，并非意图表明所述顺序是可以执行这些操作的唯一顺序。本领域 的普通技术人员会想到各种方式来对本文所述的操作进行重新排序。另 外，应当指出的是，本文中相对于本文描述的其他方法所描述的其他过 程(例如，段落[0058]中列出的那些过程)的细节也以类似的方式适用 于上文相对于图6A-6C描述的方法10300。例如，上文参考方法10300 描述的接触、移动、用户界面对象、焦点选择器和触觉输出任选地具有 本文中参考本文描述的其他方法(例如，段落[0058]中列出的那些方 法)描述的接触、移动、用户界面对象、焦点选择器和触觉输出的一个 或多个特性。为简明起见，这里不重复这些细节。

根据一些实施例，图7示出根据各种所描述的实施例的原理配置的 电子设备10400的功能框图。该设备的功能块任选地由实施各种所描述 的实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域的 技术人员应当理解，图7中所述的功能块任选地被组合或被分离为子块 以实现各种所描述的实施例的原理。因此，本文的描述任选地支持本文 所述功能块的任何可能的组合或分离或进一步限定。

如图7所示，电子设备10400包括：显示单元10402，其被配置为 显示用户界面对象；触敏表面单元10404，其被配置为检测用户接触； 以及处理单元10406，其耦接到显示单元10402和触敏表面单元 10404。在一些实施例中，处理单元包括检测单元10408、显示使能单 元10410、执行单元10412、生成单元10414和逆向单元10416。

处理单元10406被配置为检测触敏表面单元上的接触，检测接触在 触敏表面单元上的第一移动(例如，使用检测单元10408)，所述第一 移动对应于对用户界面对象执行操作；以及响应于检测到第一移动，执 行操作(例如，使用执行单元10412)并在触敏表面单元上生成第一触 觉输出(例如，使用生成单元10414)。处理单元10406被进一步配置 为检测接触在触敏表面单元上的第二移动(例如，使用检测单元 10408)，所述第二移动对应于逆向进行对用户界面对象的操作；以及 响应于检测到第二移动，逆向操作(例如，使用逆向单元10416)并在 触敏表面单元上生成第二触觉输出(例如，使用生成单元10414)，其 中第二触觉输出不同于第一触觉输出。

在一些实施例中，接触在触敏表面单元上的第一移动和接触在触 敏表面单元上的第二移动为未检测到接触从触敏表面单元10404抬离而 执行的单个连续手势的一部分。

在一些实施例中，执行操作(例如，使用执行单元10412)包括将 用户界面对象对齐到相应的对象放置辅助线，而逆向操作(例如，使用 逆向单元10416)包括使用户界面对象从相应的对象放置辅助线脱离。

在一些实施例中，执行操作(例如，使用执行单元10412)包括对 与用于删除的用户界面对象对应的数据进行标记，而逆向操作(例如， 使用逆向单元10416)包括取消对与用于删除的用户界面对象对应的数 据进行标记。

在一些实施例中，用户界面对象与文件对应，执行操作(例如， 使用执行单元10412)包括将文件放置在目录中，而逆向操作(例如， 使用逆向单元10416)包括将文件从目录移除。

在一些实施例中，用户界面对象与应用程序对应，执行操作(例 如，使用执行单元10412)包括将用户界面对象放置在应用程序启动区 域中，而逆向操作(例如，使用逆向单元10416)包括将用户界面对象 从应用程序启动区域移除。

在一些实施例中，第一触觉输出由触敏表面单元的包括第一主要 移动分量的移动来生成(例如，使用生成单元10414)，第二触觉输出 由触敏表面单元的包括第二主要移动分量的移动来生成(例如，使用生 成单元10414)，并且第一主要移动分量和第二主要移动分量具有相同 的移动轮廓和不同的幅度。

在一些实施例中，第一触觉输出由触敏表面单元的包括第一主要 移动分量的移动来生成(例如，使用生成单元10414)，第二触觉输出 由触敏表面单元的包括第二主要移动分量的移动来生成(例如，使用生 成单元10414)，并且第一主要移动分量和第二主要移动分量具有不同 的移动轮廓和相同的幅度。

上述信息处理方法中的操作任选地通过运行信息处理装置中的一 个或多个功能模块来实现，该信息处理装置诸如为通用处理器(例如， 如以上相对于图1A和图3所描述)或特定于应用的芯片。

以上参考图6A-6C所述的操作任选地由图1A-1B或图7中所描绘 的部件来实现。例如，检测操作10304和10306、执行操作10312、生 成操作10314和10332、以及逆向操作10322任选地由事件分类器 170、事件识别器180和事件处理程序190来实现。事件分类器170中 的事件监视器171检测触敏显示器112上的接触，并且事件分配器模块 174将事件信息递送到应用程序136-1。应用程序136-1的相应的事件 识别器180将事件信息与相应的事件定义186进行对比，并且确定触敏 表面上的第一位置处的第一接触是否对应于预定义的事件或子事件，诸 如选择用户界面上的一个对象。当检测到相应的预定义的事件或子事件 时，事件识别器180激活与检测到该事件或子事件相关联的事件处理程 序190。事件处理程序190任选地使用或调用数据更新器176或对象更 新器177来更新应用程序内部状态192。在一些实施例中，事件处理程 序190访问相应GUI更新器178来更新应用程序显示的内容。类似 地，本领域技术人员会清楚地知道基于在图1A-1B中所示的部件可如 何实现其他过程。

指示用户界面对象的z次序的变化

许多电子设备显示具有层次序(例如，用户界面对象的z次序或从 前到后的次序)的用户界面对象。用户通常通过在显示器上重新定位对 象来与此类对象交互，并且根据对象从前到后的次序在显示器上显示重 叠对象(例如，在两个对象重叠的情况下，将一个对象显示为在另一个 对象“前面”)。除了在显示器上重新定位对象之外，用户经常想要改 变对象在显示器上的从前到后的次序。在一些方法中，在视觉上指示z 次序的变化。下文描述的实施例通过在对象彼此重叠且它们的z次序变 化时提供触觉输出来改进这些方法。因此，当对象重叠且因此它们的彼 此覆盖随z次序变化而改变时，用户得到z次序变化的触觉和视觉指 示。

图8A-8S示出根据一些实施例的用于指示用户界面对象的z次序变 化的示例性用户界面。这些附图中的用户界面被用于阐示下文描述的过 程，包括图9A-9D中的过程。图8A-8S包括强度图，其示出触敏表面 上的接触相对于包括轻按压强度阈值(例如，“IT_L”)和深按压强度 阈值(例如，“IT_D”)的多个强度阈值的当前强度。在一些实施例 中，与下文参考“IT_D”描述的那些操作类似的操作是参考不同的强度 阈值(例如，“IT_L”)来执行的。

图8A示出在设备(例如，设备300、100)的显示器450(例如， 显示器340、触摸屏112)上显示的用户界面对象10506-1和10506-2。 对象10506任选地是相应应用程序的窗口、绘图中的形状或其他图形， 或者呈现中的对象(例如，文本块、图片等)。对象10506-1和10506- 2以z次序显示。在图8A中，对象10506-1在z次序中位于对象 10506-2前面(或“上方”)，并且同样，对象10506-2在z次序中位 于对象10506-1后面(或“后方”或“下方”)。如果两个对象不重叠 (例如，图8A中的对象10506-1和10506-2)，则它们相对于彼此的z 次序可能不会可视地向用户显示。在图8D中，对象10506-1在z次序 中位于对象10506-2前面，并且该相对的z次序可视地向用户显示，因 为对象10506-1和10506-2重叠，并且对象10506-1覆盖对象10506-2 的至少一部分。

图8A还示出在显示器450上显示的光标10504。光标10504是焦 点选择器的示例。用户任选地将光标10504定位在对象10506上方，以 使该对象成为焦点。在图8A中，光标10504位于对象10506-1上方。

图8B示出在触敏表面451上检测到的接触10510。当在触敏表面 451上检测到接触10510时，设备接收用于在z次序中对将对象10506- 1移动到对象10506-2下方的请求(例如，如图8C所示)。设备任选 地接收到例如以下形式的请求：在光标10504位于对象10506-1上方时 在触敏表面451上执行的手势输入(例如，用接触10510执行的手 势)、在光标10504位于对象10506-1上方时接触10510的强度增大到 高于强度阈值、或使用键盘或其他输入设备所进行的输入(例如，键盘 快捷键，使用键盘或其他输入设备对菜单选项的选择)。强度(以及强 度的变化)任选地通过包括在设备中的一个或多个传感器来检测，所述 传感器被配置为检测与触敏表面451的接触的强度。在一些实施例中， 在接触10510具有介于IT_L与IT_D之间的强度时，用户能够通过在触敏 表面上移动接触10510来移动与光标10504相关联的对象。

响应于请求(例如，接触的强度从图8B中的低于IT_D的强度增大 到图8C中的高于IT_D的强度)，对象10506-1在z次序中被移动到对 象10506-2下方。如果对象10506-1和10506-2不重叠，则z次序的变 化任选地不会可视地向用户显示，如图8C所示。根据确定对象10506- 1和10506-2不重叠，不生成与将对象10506-1移动到对象10506-2下 方相关联的触觉输出。

图8D示出在显示器450上以z次序显示的对象10506-1和10506- 2，其中对象10506-1在对象10506-2前面。在图8D中，对象10506-1 和10506-2重叠，此时对象10506-1覆盖对象10506-2的一部分。光标 10504被显示为位于对象10506-1上方。例如，在图8D中，在光标 10504位于对象10506-1上方时，设备检测到接触10512在触敏表面 451上向右下方的移动10511，并且接触10512的强度介于IT_L和IT_D之 间，并且响应于检测到接触10512的移动10511，设备根据接触10512 在触敏表面上的移动而将光标10504和对象10506-1在显示器450上向 左下方移动。

图8D还示出在触敏表面451上检测到的接触10512。当在触敏表 面451上检测到接触10512时，设备接收用于在z次序中将对象10506- 1移动到对象10506-2下方的请求(例如，如图8C所示)。设备任选 地接收到例如以下形式的请求：在光标10504位于对象10506-1上方时 在触敏表面451上执行的手势输入(例如，用接触10512执行的手 势)、在光标10504位于对象10506-1上方时接触10512的强度增大到 高于强度阈值、或使用键盘或其他输入设备所进行的输入(例如，键盘 快捷键，使用键盘或其他输入设备对菜单选项的选择)。

响应于请求(例如，接触的强度从图8D中的低于IT_D的强度增大 到图8E中的高于IT_D的强度)，对象10506-1在z次序中被移动到对 象10506-2下方，如图8E所示。随着z次序的所述变化，对象10506-2 此时覆盖对象10506-1的一部分。根据确定对象10506-1和10506-2重 叠，结合将对象10506-1移动到对象10506-2下方，生成与将对象 10506-1移动到对象10506-2下方相关联的触觉输出10513。触觉输出 可经由接触10512作为触觉感受被用户感觉到。在一些实施例中，触觉 输出由触敏表面451的移动来生成，并且该移动包括主要移动分量，该 主要移动分量任选地具有带波长的波形形状，诸如正方形、正弦形、 squine、锯齿形或三角形。

许多电子设备显示具有层次序(例如，用户界面对象的z次序或从 前到后的次序)的用户界面对象。用户通常通过在显示器上重新定位对 象来与此类对象交互，并且根据对象从前到后的次序在显示器上显示重 叠对象(例如，在两个对象重叠的情况下，将一个对象显示为在另一个 对象“前面”)。除了在显示器上重新定位对象之外，用户经常想要改 变对象在显示器上的从前到后的次序。

因此，当两个对象之间的相对z次序被改变时，如果两个对象重 叠，则生成触觉输出(例如，图8E中的10513)；如果两个对象不重 叠，则不生成触觉输出(例如，如图8C所示)。触觉输出向用户提供 z次序变化影响到哪个对象被另一个对象覆盖的指示。

图8F-8I示出使用用于改变z次序的控件将对象在z次序内移动的 示例。图8F示出在显示器450上显示的对象10506-1和10506-2以及 光标10504。对象10506-1和10506-2以z次序显示，此时对象10506-1 在z次序中位于对象10506-2前面。z次序滑动条10514也显示在显示 器450上。z次序滑动条10514包括滑块10516-1和10516-2。滑块 10516-1与对象10506-1对应，滑块10516-2与对象10506-2对应。滑块 10516相对于z次序滑动条10514上的其他滑块的位置与相应的对象在 z次序中的位置对应。例如，如图8F所描绘，滑块10516在z次序滑动 条10514上越靠左，相应的对象10506在z次序中越靠前。因此，滑块 10516-1在滑块10516-2的左边，这与对象10506-1和10506-2的z次序 是对应的，如图所示。应当理解，在z次序滑动条10514上越靠左与相 应的对象在z次序中越靠前之间的对应是设计选择；任选地，滑块 10516在z次序滑动条10514上越靠右，相应的对象10506在z次序中 越靠前。

在图8F中，设备检测接触10518在触敏表面451上向下的移动 10517，并且响应于检测到接触10518的移动10517，设备将光标10504 移动到滑块10516-1上方。图8G还示出在光标10504位于滑块10516-1 上方时在触敏表面451上检测到的接触10518。包括接触10518的手势 包括在接触10518的强度介于IT_L与IT_D之间时，接触10518在触敏表 面451上的移动10519。响应于检测到包括接触10518的移动10519的 手势，将滑块10516-1在滑动条10514上向右移动越过滑块10516-2， 使得滑块10516-2在滑动条10514上位于滑块10516-1左侧，如图8G 所示。响应于滑块10516-1移动到滑块10516-2右侧，与滑块10516-1 对应的对象10506-1在z次序中向下移动到对象10506-2下方。根据确 定对象10506-1和10506-2重叠，结合将对象10506-1移动到对象 10506-2下方，生成与将对象10506-1移动到对象10506-2下方相关联 的触觉输出10513。触觉输出可经由接触10518作为触觉感受被用户感 觉到。在一些实施例中，触觉输出由触敏表面451的移动来生成，并且 该移动包括主要移动分量，该主要移动分量任选地具有波形形状，诸如 正方形、正弦形、squine、锯齿形或三角形。

图8I示出在显示器450上显示的对象10506-1和10506-2以及滑动 条10514，此时对象10506-1在z次序中位于对象10506-2前面。在图 8H中，设备检测接触10520在触敏表面451上向右下方的移动 10521，并且响应于检测到接触10520的移动10521，设备将光标10504 移动到滑块10516-2上方。图8H还示出在显示器450上显示的位于滑 块10516-2上方的光标10504，以及在光标10504位于滑块10516-2上 方时在触敏表面451上检测到的包括接触10520向左的移动10523的手 势。包括接触10520的手势包括接触在触敏表面451上的移动10523。 响应于检测到包括接触10520的手势，将滑块10516-2在滑动条10514 上向左移动越过滑块10516-1，使得滑块10516-2在滑动条10514上位 于滑块10516-1左侧，如图8I所示。响应于滑块10516-2移动到滑块 10516-1左侧，与滑块10516-2对应的对象10506-2在z次序中向上移动 到对象10506-1前面。根据确定对象10506-1和10506-2重叠，结合将 对象10506-2移动到对象10506-1上方，生成与将对象10506-2移动到 对象10506-1上方相关联的触觉输出10513。触觉输出可经由接触 10520作为触觉感受被用户感觉到。在一些实施例中，触觉输出由触敏 表面451的移动来生成，并且该移动包括主要移动分量，该主要移动分 量任选地具有波形形状，诸如正方形、正弦形、squine、锯齿形或三角 形。

在一些实施例中，与在z次序中将对象10506-1移动到对象10506- 2下方相关联的触觉输出具有波长，该波长基于在接收到用于在z次序 中将对象10506-1移动到对象10506-2下方的请求之前对象10506-2在 z次序中的位置而确定。

图8J示出在显示器450上显示的用户界面对象10506-1、10506-2 和10506-3。对象10506-1、10506-2和10506-3显示为具有z次序。在 图8J中，对象10506-1在对象10506-2和10506-3前面。对象10506-3 在对象10506-2前面但在对象10506-1后面。因此，对象10506-3是在 z次序中位于对象10506-1与10506-2之间的居间对象，即便在图8J中 不存在对该排序的视觉指示。对象10506-1和10506-3不重叠，而对象 10506-1和10506-2重叠。光标10504被显示为在对象10506-1上方。

图8J示出在触敏表面451上检测到的接触10524。当在触敏表面 451上检测到接触10524时，设备接收用于在z次序中将对象10506-1 移动到对象10506-2下方的请求(例如，接触10524的强度从图8J中 的低于IT_L的强度增大到图8L中的高于IT_D的强度)。设备任选地接 收到例如以下形式的请求：在光标10504位于对象10506-1上方时在触 敏表面451上执行的手势输入(例如，用接触10524执行的手势)、在 光标10504位于对象10506-1上方时接触10524的强度增大到高于强度 阈值、或使用键盘或其他输入设备所进行的输入(例如，键盘快捷键， 使用键盘或其他输入设备对菜单选项的选择)。

响应于该请求，在z次序中将对象10506-1移动到居间对象10506- 3下方(例如，当接触10524达到图8K中的高于IT_L的强度时)，随 后移动到对象10506-2下方(例如，当接触10524达到图8M中的高于 IT_D的强度时)，如图8K至8L中所示。当对象10506-1移动到对象 10506-3下方时，根据确定对象10506-1和10506-3不重叠，不生成与 将对象10506-1移动到对象10506-3下方相关联的触觉输出。当对象 10506-1移动到对象10506-2下方时，根据确定对象10506-1和10506-2 重叠，结合将对象10506-1移动到对象10506-2下方，生成与将对象 10506-1移动到对象10506-2下方相关联的触觉输出10525。触觉输出 可经由接触10524作为触觉感受被用户感觉到。在一些实施例中，触觉 输出由触敏表面451的移动来生成，并且该移动包括主要移动分量，该 主要移动分量任选地具有波形形状，诸如正方形、正弦形、squine、锯 齿形或三角形。

图8M示出在显示器450上显示的用户界面对象10506-1、10506-2 和10506-3。对象10506-1、10506-2和10506-3显示为具有z次序。在 图8M中，对象10506-1在对象10506-2和10506-3前面。对象10506-3 在对象10506-2前面但在对象10506-1后面。因此，对象10506-3是在 z次序中位于对象10506-1与10506-2之间的居间对象。对象10506-1、 10506-2和10506-3重叠。光标10504被显示为在对象10506-1上方。

图8M示出在触敏表面451上检测到的接触10526。当在触敏表面 451上检测到接触10526时，设备接收用于在z次序中将对象10506-1 移动到对象10506-2下方的请求(例如，接触10526的强度从图8M中 的低于IT_L的强度增大到图8O中的高于IT_D的强度)。在一些情况 下，设备接收到例如以下形式的请求：在光标10504位于对象10506-1 上方时在触敏表面451上执行的手势输入(例如，用接触10526执行的 手势)、在光标10504位于对象10506-1上方时接触10526的强度增大 到高于强度阈值、或使用键盘或其他输入设备所进行的输入(例如，键 盘快捷键，使用键盘或其他输入设备对菜单选项的选择)。

响应于该请求，在z次序中将对象10506-1移动到对象10506-3下 方(例如，在接触10524达到图8N中的高于IT_L的强度时)，随后移 动到对象10506-2下方(例如，在接触10524达到图8O中的高于IT_D的强度时)，如图8N至8O中所示。当对象10506-1移动到对象 10506-3下方时，根据确定对象10506-1和10506-3重叠，结合将对象 10506-1移动到对象10506-3下方，生成与将对象10506-1移动到对象 10506-3下方相关联的触觉输出10527。与对象10506-1移动到对象 10506-3下方相关联的该触觉输出可经由接触10526作为触觉感受被用 户感觉到。当对象10506-1移动到对象10506-2下方时，根据确定对象 10506-1和10506-2重叠，结合将对象10506-1移动到对象10506-2下 方，生成与将对象10506-1移动到对象10506-2下方相关联的触觉输出 10528。与对象10506-1移动到对象10506-2下方相关联的该触觉输出 可经由接触10526作为触觉感受被用户感觉到。在一些实施例中，触觉 输出由触敏表面451的相应移动来生成，并且所述相应移动各自包括主 要移动分量，该主要移动分量任选地具有波形形状，诸如正方形、正弦 形、squine、锯齿形或三角形。

在一些实施例中，与对象10506-1移动到对象10506-3下方相关联 的触觉输出10527(下文称为“触觉输出A”)和与对象10506-1在移 动到对象10506-3下方之后移动到对象10506-2下方相关联的触觉输出 10528(下文称为“触觉输出B”)是不同的。例如，触觉输出A  10527的主要移动分量任选地具有与触觉输出B 10528的主要移动分量 不同的波长。在一些实施例中，触觉输出A 10527的波长是基于对象 10506-3在z次序中的位置确定的，触觉输出B 10528的波长是基于对 象10506-2在z次序中的位置确定的。

在一些实施例中，触觉输出A 10527的波长是基于多个用户界面对 象10506确定的，该多个用户界面对象10506与对象10506-1重叠且在 z次序中位于对象10506-1与对象10506-3之间。在一些实施例中，触 觉输出B 10528的波长是基于多个用户界面对象10506确定的，该多个 用户界面对象10506与对象10506-1重叠且在z次序中位于对象10506- 1与对象10506-2之间。

对象10506-1任选地与以相应的z次序序列布置的多个其他用户界 面对象重叠，不考虑对象10506-1是否与对象10506-2重叠。因此，在 一些实施例中，z次序包括对象10506-1，在对象10506-1后面的多个 其他用户界面对象，接着是对象10506-2。因此，当在z次序中将对象 10506-1移动到对象10506-2下方时，根据用于在z次序中将对象 10506-1移动到对象10506-2下方的请求，将对象10506-1依次移动到 所述多个其他用户界面对象中的每一个下方，之后移动到对象10506-2 下方。对于对象10506-1移动到其下方的所述多个其他用户界面对象中 的每一个，结合将对象10506-1移动到相应用户界面对象下方生成触觉 输出。因此，随着对象10506-1移动到所述多个其他用户界面对象下 方，生成一系列触觉输出。在一些实施例中，基于算术级数生成一系列 触觉输出。例如，每个连续触觉输出的波长是前一个触觉输出的波长的 两倍。在一些其他实施例中，基于音乐级数生成一系列触觉输出。例 如，每个连续触觉输出对应于预定义音阶中的下一个音符或低八度音阶 中的相同音符。

图8P-8S示出在具有触敏显示器的设备(例如，具有触摸屏112的 设备100)上实现的上文参考图8A-8O描述的用户界面的示例。图8P- 8Q示出在触敏显示器112上显示的对象10532-1和10532-2。不重叠的 对象10532-1和10532-2以z次序显示，此时对象10532-1在z次序中 位于对象10532-2前面。

图8P示出在触敏显示器112上，在对象10532-1上方的位置处检 测到的接触10534。当在触敏显示器112上检测到接触10534时，设备 接收用于在z次序中将对象10532-1移动到对象10532-2下方的请求。 设备任选地接收到例如以下形式的请求：在触敏显示器112上执行的手 势输入(例如，用在对象10532-1上方的接触10534或用在触敏显示器 112上的另一接触执行的手势)或对象10532-1上方的接触10534的强 度增大到高于强度阈值(例如，接触10534的强度从图8P中的低于 IT_D的强度增大到图8Q中的高于IT_D的强度)。

响应于该请求，在z次序中将对象10532-1移动到对象10532-2下 方，如图8Q所示。根据确定对象10532-1和10532-2不重叠，不生成 与将对象10532-1移动到对象10532-2下方相关联的触觉输出。

图8R示出在触敏显示器112上显示的重叠对象10532-1和10532- 2。对象10532-1和10532-2以z次序显示，此时对象10532-1在z次序 中位于对象10532-2前面。图8R还示出在触敏显示器112上于对象 10532-1上方的位置处检测到的接触10536。当在触敏显示器112上检 测到接触10536时，设备接收用于在z次序中将对象10532-1移动到对 象10532-2下方的请求。设备任选地接收到例如以下形式的请求：在触 敏显示器112上执行的手势输入(例如，用在对象10532-1上方的接触 10536或用在触敏显示器112上的另一接触执行的手势)或对象10532- 1上方的接触10536的强度增大到高于强度阈值(例如，接触10536的 强度从图8R中的低于IT_D的强度增大到图8S中的高于IT_D的强度)。

响应于该请求，在z次序中将对象10532-1移动到对象10532-2下 方，如图8S所示。根据确定对象10532-1和10532-2重叠，结合将对 象10532-1移动到对象10532-2下方，生成与将对象10532-1移动到对 象10532-2下方相关联的触觉输出10537。触觉输出可经由接触10536 作为触觉感受被用户感觉到。在一些实施例中，触觉输出由触敏显示器 112的移动来生成，并且该移动包括主要移动分量，该主要移动分量任 选地具有波形形状，诸如正方形、正弦形、squine、锯齿形或三角形。 在一些实施例中，与在z次序中将对象10532-1移动到对象10532-2下 方相关联的触觉输出具有波长，该波长基于在接收到用于在z次序中将 对象10532-1移动到对象10532-2下方的请求之前对象10532-2在z次 序中的位置而确定。

图9A-9D是示出根据一些实施例的指示用户界面对象的z次序变 化的方法10600的流程图。方法10600在具有显示器和触敏表面的电子 设备(例如，图3的设备300或图1A的便携式多功能设备100)处执 行。在一些实施例中，显示器为触摸屏显示器，并且触敏表面在显示器 上。在一些实施例中，显示器与触敏表面是分开的。方法10600中的一 些操作任选地被组合，并且/或者一些操作的顺序任选地被改变。

如下文所述，方法10600提供用于指示用户界面对象的z次序变化 的直观方式。该方法减小当指示用户界面对象的z次序变化时对用户造 成的认知负担，从而创建更有效的人机界面。对于电池驱动的电子设 备，使用户能够更快且更有效地感知用户界面对象的z次序变化节省了 功率并增加了电池充电之间的时间。

设备在显示器上显示(10602)多个用户界面对象，其中所述多个用 户界面对象具有z次序，所述多个用户界面对象包括第一用户界面对象 和第二用户界面对象，并且第一用户界面对象在z次序中位于第二用户 界面对象上方。多个用户界面对象，诸如对象10506-1和10506-2或对 象10532-1和10532-2，显示为具有z次序，分别如图8A、8D或8P中 所示。在图8A和8D中，对象10506-1在z次序中位于对象10506-2上 方。在图8P中，对象10532-1在z次序中位于对象10532-2上方。

当在触敏表面上检测到接触(例如，手指接触)时，设备接收 (10604)用于在z次序中将第一用户界面对象移动到第二用户界面对象 下方的请求。例如，当在触敏表面(例如，触敏表面451、触敏显示器 112)上检测到接触(例如，接触10510，图8A；接触10512，图8D； 接触10518，图8F；接触10520，图8H；接触10524，图8J；接触 10526，图8M；接触10534，图8Q；接触10536，图8R)时，接收用 于将对象10506-1移动到对象10506-2下方的请求。

在一些实施例中，接收用于将第一用户界面对象移动到第二用户 界面对象下方的请求包括(10606)，在焦点选择器位于第一用户界面对 象上方时，检测到接触的强度增大到高于相应强度阈值(例如，深按压 强度阈值IT_D)。因此，直观地使用户能够在z次序中将第一用户界面 对象“向下”按压到第二用户界面对象下方。例如，在接触光标10504 位于对象10506-1上方时，接触10510(或接触10512或10524或 10526)的强度任选地从低于IT_D的强度增大到高于IT_D的强度。在其 中触敏表面是触敏显示器(例如，触敏显示器112)的实施例中，接收 到请求包括在接触位于第一用户对象(例如，对象10532-1)上方时检 测到接触的强度增大(例如，接触10534或10536的强度增大到高于深 按压强度阈值IT_D)。

在一些实施例中，接收用于将第一用户界面对象移动到第二用户 界面对象下方的请求包括(10608)，当显示用于改变第一用户界面对象 的z次序的控件(例如，与第一用户界面对象分开或不同的滑动条或其 他控件，其确定第一用户界面对象的z次序)时，检测到控件上的对应 于将第一用户界面对象在z次序中向下移动的输入。用于改变z次序的 控件任选地是滑动条10514(图8F)。在显示z次序滑动条10514时， 检测到与向下移动对象10506-1对应的输入(例如，包括在光标10504 位于滑块10516-1上方时接触10518在触敏表面451上的移动10519的 手势)。响应于检测到包括接触10518的移动10519的手势，设备将与 对象10506-1对应的滑块10516-1在滑动条10514上移动，该移动对应 于将对象10506-1在z次序中向下移动。

在一些实施例中，接收用于将第一用户界面对象移动到第二用户 界面对象下方的请求包括(10610)，当显示用于改变第二用户界面对象 的z次序的控件(例如，与第二用户界面对象分开/不同的滑动条或其 他控件，其确定第一用户界面对象的z次序)时，检测到控件上的对应 于将第二用户界面对象在z次序中向上移动的输入。用于改变z次序的 控件任选地是滑动条10514(图8H)。在显示z次序滑动条10514 时，检测到与向上移动对象10506-2对应的输入(例如，包括在光标 10504位于滑块10516-2上方时接触10520在触敏表面451上的移动 10523的手势)。响应于检测到包括接触10520的移动10523的手势， 设备将与对象10506-2对应的滑块10516-2在滑动条10514上移动，该 移动对应于将对象10506-2在z次序中向上移动。

响应(10612)于该请求，设备在z次序上将第一用户界面对象移动 (10614)到第二用户界面对象下方。响应于该请求，在z次序中将对象 10506-1(或10532-1)移动到对象10506-2(或10532-2)下方，如图 8C(或8E或8G或8I或8L或8O或8Q或8S)中所示。

根据确定第一用户界面对象与第二用户界面对象的至少一部分重 叠，设备结合将第一用户界面对象移动到第二用户界面对象下方，在触 敏表面上生成(10616)与将第一用户界面对象移动到第二用户界面对象 下方相关联的触觉输出(例如，图8E、8G或8I中的10513；图8L中 的10525；图8O中的10528；或图8S中的10537)。如果对象10506- 1和10506-2(或对象10532-1和10532-2)重叠，如图8D-8O或8R-8S 中所示，则在将对象10506-1(或对象10532-1)移动到对象10506-2 (或对象10532-2)下方时生成与将对象10506-1(或对象10532-1)移 动到对象10506-2(或对象10532-2)下方相关联的触觉输出。在一些 实施例中，与将第一用户界面对象移动到第二用户界面对象下方相关联 的触觉输出具有(10618)波长，该波长基于在接收到用于在z次序中将 第一用户界面对象移动到第二用户界面对象下方的请求之前第二用户界 面对象在z次序中的位置而确定(例如，第一用户界面对象在z次序中 被移动得越低，触觉输出的间距就越小)。例如，与将对象10506-1移 动到10506-2下方相关联的触觉输出具有波长，该波长基于在接收到用 于在z次序中将对象10506-1移动到对象10506-2下方的请求之前对象 10506-2在z次序中的位置而确定。

根据确定第一用户界面对象不与第二用户界面对象重叠，放弃 (10620)生成与将第一用户界面对象移动到第二用户界面对象下方相关 联的触觉输出。如果对象10506-1和10506-2(或对象10532-1和 10532-2)不重叠，如图8A-8C或8P-8Q中所示，则在将对象10506-1 (或对象10532-1)移动到对象10506-2(或对象10532-2)下方时不生 成与将对象10506-1(或对象10532-1)移动到对象10506-2(或对象 10532-2)下方相关联的触觉输出。

在一些实施例中，当第一用户界面对象的至少一部分覆盖第二用 户界面对象的至少一部分时，第一用户界面对象与第二用户界面对象的 至少一部分重叠(10622)。在一些实施例中，第一用户界面对象部分地 与第二用户界面对象重叠。在一些实施例中，第一用户界面对象完全地 与第二用户界面对象重叠(例如，第一用户界面对象覆盖整个第二用户 界面对象)。例如，在图8A中，对象10506-1和10506-2不重叠，而 在图8D中，对象10506-1和10506-2重叠。

在一些实施例中，所述多个用户界面对象包括(10624)居间用户界 面对象，并且所述居间用户界面对象在z次序中具有位于第一用户界面 对象与第二用户界面对象之间的位置。如图8J和8M所示，例如，任 选地存在居间对象10506-3，其在z次序中位于对象10506-1与10506-2 之间。在一些实施例中，当存在居间用户界面对象时，响应(10612)于 用于在z次序中将第一用户界面对象移动到第二用户界面对象下方的请 求，设备在z次序中将第一用户界面对象移动(10630)到居间用户界面 对象下方，之后在z次序中将第一用户界面对象移动到第二用户界面对 象下方。根据确定第一用户界面对象与居间用户界面对象的至少一部分 重叠，设备结合将第一用户界面对象移动到居间用户界面对象下方，在 触敏表面上生成(10632)与将第一用户界面对象移动到居间用户界面对 象下方相关联的触觉输出。根据确定第一用户界面对象不与居间用户界 面对象重叠，设备放弃生成与将第一用户界面对象移动到居间用户界面 对象下方相关联的触觉输出。响应于用于在z次序中将对象10506-1移 动到对象10506-2下方的请求，在z次序中将对象10506-1移动到对象 10506-2下方的过程中将对象10506-1移动到对象10506-3下方，如图 8J至8O所示。如果对象10506-1与对象10506-3不重叠，如图8J至 8K所示，则不生成与将对象10506-1移动到对象10506-3下方相关联的 触觉输出。如果对象10506-1与对象10506-3重叠，如图8M至8N所 示，则生成与将对象10506-1移动到对象10506-3下方相关联的触觉输 出。

在一些实施例中，第一用户界面对象与居间用户界面对象和第二 用户界面对象重叠(10635)，并且响应(10612)于用于在z次序中将第一 用户界面对象移动到第二用户界面对象下方的请求，设备在触敏表面上 生成(10636)与在z次序中在将第一用户界面对象移动到第二用户界面 对象下方之前，将第一用户界面对象移动到居间用户界面对象下方相关 联的第一触觉输出；并且在触敏表面上生成(10638)与将第一用户界面 对象移动到第二用户界面对象下方相关联的第二触觉输出，其中第一触 觉输出不同于第二触觉输出。例如，如图8M所示，对象10506-1与对 象10506-3和对象10506-2重叠。响应于用于在z次序中将对象10506- 1移动到对象10506-2下方的请求，在z次序中将对象10506-1移动到 对象10506-3下方，接着移动到对象10506-2下方。由于对象10506-1 与对象10506-3和对象10506-2重叠，所以针对将对象10506-1移动到 对象10506-3下方生成触觉输出A 10527，并且针对将对象10506-1移 动到对象10506-2下方生成触觉输出B 10528。触觉输出A 10527和触 觉输出B 10528任选地是不同的。例如，触觉输出A 10527和触觉输出 B 10528优选地具有不同的波长或幅度。

在一些实施例中，第一触觉输出是(10640)由触敏表面的包括第一 主要移动分量的移动(例如，与第一触觉输出的忽略任何非预期谐振的 初始脉冲对应的移动)生成的，第二触觉输出是由触敏表面的包括第二 主要移动分量的移动(例如，与第二触觉输出的忽略任何非预期谐振的 初始脉冲对应的移动)生成的，并且第一主要移动分量和第二主要移动 分量具有不同的波长(例如，同时维持相同的移动轮廓诸如相同的波形 形状，诸如正方形、正弦形、squine、锯齿形或三角形，并且/或者同时 维持相同的幅度)。触觉输出A 10527和触觉输出B 10528具有相应的 主要移动分量，所述主要移动分量具有不同的波长。因此，针对将对象 10506-3移动到下方的触觉输出A 10527和针对将对象10506-2移动到 下方的触觉输出B 10528对用户来说感觉可能是不同的。

在一些实施例中，第一触觉输出的波长是(10642)基于居间用户界 面对象在z次序中的位置来确定的，并且第二触觉输出的波长是基于第 二用户界面对象在z次序中的位置来确定的(例如，在将第一用户界面 对象移动经过相应用户界面对象时生成的触觉输出是基于相应用户界面 对象在z次序中的绝对位置确定的，其向用户提供有关已将第一用户界 面对象向下推送到z次序中的何种程度的反馈)。在图8M至8O中， 例如，触觉输出A 10527的波长任选地是基于对象10506-3在z次序中 的绝对位置来确定的，并且触觉输出B 10528的波长任选地是基于对象 10506-2在z次序中的绝对位置来确定的。

在一些实施例中，第一触觉输出的波长是(10644)基于多个用户界 面对象确定，所述多个用户界面对象与第一用户界面对象重叠且在z次 序中位于第一用户界面对象与居间用户界面对象之间。在图8M至8O 中，例如，触觉输出A 10527的波长任选地是基于与对象10506-1重叠 且在z次序中位于对象10506-1与对象10506-3之间的用户界面对象的 数量确定的。

在一些实施例中，第二触觉输出的波长是(10646)基于多个用户界 面对象确定，所述多个用户界面对象与第一用户界面对象重叠且在z次 序中位于第一用户界面对象与第二用户界面对象之间(例如，在将第一 用户界面对象移动经过相应用户界面对象时生成的触觉输出是基于在第 一用户界面对象与相应的对象之间存在多少其他对象确定的，其向用户 提供有关已将用户界面对象向下推送到“局部”z次序中的何种程度的 反馈，该“局部”z次序针对位于用户界面的同一个一般区域中并且彼 此重叠的对象)。在图8M至8O中，例如，触觉输出B 10528的波长 任选地是基于与对象10506-1重叠且在z次序中位于对象10506-1与对 象10506-2之间的用户界面对象的数量确定的。

在一些实施例中，第一用户界面与以相应的z次序序列布置的多个 其他用户界面对象重叠(10648)，并且下一个触觉输出(例如，下一个 触觉输出的间距/波长/强度)是基于来自前一个触觉输出的算术级数 (例如，每个连续触觉输出是前一个触觉输出的波长的两倍)，该下一 个触觉输出对应于将第一用户界面对象移动到z次序序列中的下一个用 户界面对象下方，该前一个触觉输出对应于将第一用户界面对象移动到 z次序序列中的前一个用户界面对象下方。

在一些实施例中，第一用户界面与以相应的z次序序列布置的多个 其他用户界面对象重叠(10650)，并且下一个触觉输出(例如，下一个 触觉输出的间距/波长/强度)是基于来自下一个触觉输出的音乐级数 (例如，每个连续触觉输出对应于预定义音阶中的下一个音符或低八度 音阶中的相同音符)，该下一个触觉输出对应于将第一用户界面对象移 动到z次序序列中的下一个用户界面对象下方，该下一个触觉输出对应 于将第一用户界面对象移动到z次序序列中的前一个用户界面对象下 方。

例如，在一些情况下，对象10506-1与以相应的z次序序列布置的 多个其他用户界面对象重叠，不考虑对象10506-1是否与对象10506-2 重叠。因此，在一些实施例中，z次序包括对象10506-1，在对象 10506-1后面的多个其他用户界面对象，接着是对象10506-2。因此， 当在z次序中将对象10506-1移动到对象10506-2下方时，根据用于在 z次序中将对象10506-1移动到对象10506-2下方的请求，在z次序序 列中将对象10506-1移动到所述多个其他用户界面对象中的每个下方， 之后移动到对象10506-2下方。在该示例中，对于对象10506-1移动到 其下方的所述多个其他用户界面对象中的每个，结合将对象10506-1移 动到相应的其他用户界面对象下方生成触觉输出。因此，随着对象 10506-1移动到所述多个其他用户界面对象下方，生成一系列触觉输 出。在一些实施例中，基于算术级数生成一系列触觉输出。例如，每个 连续触觉输出的波长是前一个触觉输出的波长的两倍。在一些其他实施 例中，基于音乐级数生成一系列触觉输出。例如，每个连续触觉输出对 应于预定义音阶中的下一个音符或低八度音阶中的相同音符。

应当理解，图9A-9D中已进行描述的操作的特定顺序仅仅是示例 性的，并非意图表明所述顺序是可以执行这些操作的唯一顺序。本领域 的普通技术人员会想到各种方式来对本文所述的操作进行重新排序。另 外，应当指出的是，本文中相对于本文描述的其他方法(例如，段落 [0058]中列出的那些方法)所描述的其他过程的细节也以类似的方式适 用于上文相对于图9A-9D描述的方法10600。例如，上文参考方法 10600描述的接触、手势、用户界面对象、触觉输出、强度阈值和焦点 选择器任选地具有本文中参考本文描述的其他方法(例如，段落[0058] 中列出的那些方法)描述的接触、手势、用户界面对象、触觉输出、强 度阈值和焦点选择器的一个或多个特性。为简明起见，这里不重复这些 细节。

根据一些实施例，图10示出根据各种所描述的实施例的原理配置 的电子设备10700的功能框图。该设备的功能块任选地由实施各种所描 述的实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域 的技术人员应当理解，图10中所述的功能块任选地被组合或被分离为 子块以实现各种所描述的实施例的原理。因此，本文的描述任选地支持 本文所述功能块的任何可能的组合或分离或进一步限定。

如图10所示，电子设备10700包括：显示单元10702，其被配置 为在显示单元10702上显示多个用户界面对象，其中：所述多个用户界 面对象具有z次序，所述多个用户界面对象包括第一用户界面对象和第 二用户界面对象，并且第一用户界面对象在z次序中位于第二用户界面 对象上方；触敏表面单元10704，其被配置为接收接触；以及处理单元 10706，其耦接到显示单元10702和触敏表面单元10704。在一些实施 例中，处理单元10706包括接收单元10708、移动单元10710和生成单 元10712。

处理单元10706被配置为：当在触敏表面单元10704上检测到接触 时，接收用于在z次序中将第一用户界面对象移动到第二用户界面对象 下方的请求(例如，使用接收单元10708)；并且响应于该请求：在z 次序中将第一用户界面对象移动到第二用户界面对象下方(例如，使用 移动单元10710)；根据确定第一用户界面对象与第二用户界面对象的 至少一部分重叠，结合将第一用户界面对象移动到第二用户界面对象下 方，在触敏表面单元10704上生成与将第一用户界面对象移动到第二用 户界面对象下方相关联的触觉输出(例如，使用生成单元10712)；以 及根据确定第一用户界面对象不与第二用户界面对象重叠，放弃生成与 将第一用户界面对象移动到第二用户界面对象下方相关联的触觉输出 (例如，使用生成单元10712)。

在一些实施例中，当第一用户界面对象的至少一部分覆盖第二用 户界面对象的至少一部分时，第一用户界面对象与第二用户界面对象的 至少一部分重叠。

在一些实施例中，接收到用于将第一用户界面对象移动到第二用 户界面对象下方的请求包括，在焦点选择器位于第一用户界面对象上方 时，检测到接触的强度增大到高于相应强度阈值。

在一些实施例中，接收到用于将第一用户界面对象移动到第二用 户界面对象下方的请求包括，在显示用于改变第一用户界面对象的z次 序的控件时，检测到控件上的对应于将第一用户界面对象在z次序中向 下移动的输入。

在一些实施例中，接收到用于将第一用户界面对象移动到第二用 户界面对象下方的请求包括，在显示用于改变第二用户界面对象的z次 序的控件时，检测到控件上的对应于将第二用户界面对象在z次序中向 上移动的输入。

在一些实施例中，所述多个用户界面对象包括居间用户界面对 象，并且所述居间用户界面对象在z次序中具有位于第一用户界面对象 与第二用户界面对象之间的位置。处理单元10706被配置为：响应于用 于在z次序中将第一用户界面对象移动到第二用户界面对象下方的请 求：在z次序中将第一用户界面对象移动到居间用户界面对象下方，之 后在z次序中将第一用户界面对象移动到第二用户界面对象下方(例 如，使用移动单元10710)；根据确定第一用户界面对象与居间用户界 面对象的至少一部分重叠，结合将第一用户界面对象移动到居间用户界 面对象下方，在触敏表面单元10704上生成与将第一用户界面对象移动 到居间用户界面对象下方相关联的触觉输出(例如，使用生成单元 10712)；以及根据确定第一用户界面对象不与居间用户界面对象重 叠，放弃生成与将第一用户界面对象移动到居间用户界面对象下方相关 联的触觉输出(例如，使用生成单元10712)。

在一些实施例中，第一用户界面对象与居间用户界面对象和第二 用户界面对象重叠。处理单元10706被配置为：响应于用于在z次序中 将第一用户界面对象移动到第二用户界面对象下方的请求：在触敏表面 单元10704上生成与在z次序中在将第一用户界面对象移动到第二用户 界面对象下方之前，将第一用户界面对象移动到居间用户界面对象下方 相关联的第一触觉输出(例如，使用生成单元10712)；并且在触敏表 面单元10704上生成与将第一用户界面对象移动到第二用户界面对象下 方相关联的第二触觉输出，其中第一触觉输出不同于第二触觉输出(例 如，使用生成单元10712)。

在一些实施例中，第一触觉输出由触敏表面单元10704的包括第一 主要移动分量的移动来生成，第二触觉输出由触敏表面单元10704的包 括第二主要移动分量的移动来生成，并且第一主要移动分量和第二主要 移动分量具有不同的波长。

在一些实施例中，第一触觉输出的波长是基于居间用户界面对象 在z次序中的位置确定的，并且第二触觉输出的波长是基于第二用户界 面对象在z次序中的位置确定的。

在一些实施例中，第一触觉输出的波长是基于多个用户界面对象 确定的，该多个用户界面对象与第一用户界面对象重叠且在z次序中位 于第一用户界面对象与居间用户界面对象之间。

在一些实施例中，第二触觉输出的波长是基于多个用户界面对象 确定的，该多个用户界面对象与第一用户界面对象重叠且在z次序中位 于第一用户界面对象与第二用户界面对象之间。

在一些实施例中，与将第一用户界面对象移动到第二用户界面对 象下方相关联的触觉输出具有波长，该波长是基于在接收到用于在z次 序中将第一用户界面对象移动到第二用户界面对象下方的请求之前第二 用户界面对象在z次序中的位置而确定的。

在一些实施例中，第一用户界面与以相应的z次序序列布置的多个 其他用户界面对象重叠，并且下一个触觉输出基于来自前一个触觉输出 的算术级数，该下一个触觉输出对应于将第一用户界面对象移动到z次 序序列中的下一个用户界面对象下方，该前一个触觉输出对应于将第一 用户界面对象移动到z次序序列中的前一个用户界面对象下方。

在一些实施例中，第一用户界面与以相应的z次序序列布置的多个 其他用户界面对象重叠，并且下一个触觉输出是基于来自前一个触觉输 出的音乐级数，该下一个触觉输出对应于将第一用户界面对象移动到z 次序序列中的下一个用户界面对象下方，该前一个触觉输出对应于将第 一用户界面对象移动到z次序序列中的前一个用户界面对象下方。

上述信息处理方法中的操作任选地通过运行信息处理装置中的一 个或多个功能模块来实现，该信息处理装置诸如为通用处理器(例如， 如以上相对于图1A和图3所描述)或特定于应用的芯片。

以上参考图9A-9D所述的操作任选地由图1A-1B或图10中所描绘 的部件来实现。例如，接收操作10604、移动操作10614、生成操作 10616和放弃操作10620任选地由事件分类器170、事件识别器180和 事件处理程序190来实现。事件分类器170中的事件监视器171检测触 敏显示器112上的接触，并且事件分配器模块174将事件信息递送到应 用程序136-1。应用程序136-1的相应事件识别器180将事件信息与相 应事件定义186进行比较，并且确定触敏表面上的第一位置处的第一接 触是否(或该设备的旋转是否)对应于预定义的事件或子事件，诸如对 用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。 当检测到相应的预定义的事件或子事件时，事件识别器180激活与检测 到该事件或子事件相关联的事件处理程序190。事件处理程序190任选 地使用或调用数据更新器176或对象更新器177来更新应用程序内部状 态192。在一些实施例中，事件处理程序190访问相应GUI更新器178 来更新应用程序显示的内容。类似地，本领域技术人员会清楚地知道基 于在图1A-1B中所示的部件可如何实现其他过程。

提供警告用户的触觉反馈

许多电子设备具有显示用户界面对象的图形用户界面，所述用户 界面对象可通过调整一个或多个相关联的参数来操纵。例如，图形用户 界面任选地显示一个或多个用户界面对象(例如，图像、媒体剪辑、音 频剪辑、形状、应用程序窗口、文件夹、菜单或状态栏)，用户可通过 用户接口(例如，鼠标、触敏表面或键盘)对这些用户界面对象进行定 制(例如，放大、缩小、修剪、旋转、提高音量、减小音量或以其他方 式操纵视觉或音频参数)。出于实际的考虑，诸如相关联的显示器的尺 寸约束、相关联的扬声器的功率约束以及用户界面对象的固有属性(例 如，尺寸、形状、长度和体积)，将预定义的调整限度共同分配给这些 用户界面对象，从而限制它们的属性可被调整的程度。考虑到其中将预 定义的调整限度施加于用户界面对象的用户界面环境的复杂性，需要提 供使用户能够更有效且便利地相对于预定义的调整限度来调整这些用户 界面对象的属性的反馈，并且在已经达到或超过预定义的调整限度时向 用户报警。

下文描述的实施例提供用于向导航复杂用户界面的用户生成反馈 的改进方法和用户界面。更具体地讲，这些方法和用户界面当动作将导 致用户界面对象参数被调整为超过预定义的限度时向用户提供触觉反 馈。当用户的动作将导致用户界面对象参数被调整为超过预定义的调整 限度时，触觉反馈警告用户。以此方式，下文提供的方法和用户界面通 过提供触觉反馈以替代或补充可听和/或可视反馈，来允许用户更有效 地分清允许的、禁止的和不推荐的参数调整之间的差别。一些用于警告 用户已经超过预定义的调整限度的方法依赖可听或可视提示。然而，存 在许多将要调低或消除电子设备的音量，从而致使可听提示无效的情形 (例如，在上班时、在剧院中，以及在各种社交场合中)。有利地，下 文描述的方法和用户界面通过提供用于指示已经超过或将要超过预定义 的调整限度的触觉反馈来增强或替换可听反馈，致使即便电子设备的音 量已被调低或消除，所述警告仍然有效。

图11A-11T示出根据一些实施例的用于当动作将导致参数被调整 为超过预定义的限度时提供反馈的示例性用户界面。这些附图中的用户 界面被用于示出下文描述的过程，包括图12A-12B中的过程。

图11A示出根据一些实施例的显示图像10814-10830和用于控制图 像的参数(例如，尺寸)的控制图标10802(例如，控件的滑块或把 手)的示例性用户界面10808。在图11A中，用户界面10808显示在电 子设备的显示器450上，该电子设备还包括触敏表面451以及一个或多 个传感器，所述传感器用于检测与触敏表面的接触的强度。在一些实施 例中，触敏表面451是触摸屏显示器，其任选地是显示器450或独立显 示器。用户界面10808显示用于控制与相应的内容(例如，在用户界面 10808上显示的图像10814、10816、10818、10820、10822、10824、 10826、10828和10830)相关联的参数(例如，尺寸)的控制图标 10802。在图11A中，用户界面10808还显示光标10806，其可由用户 通过在触敏表面451上的接触进行控制。例如，检测到接触(例如，手 势)在触敏表面451上的移动对应于光标10806在用户界面10808上的 移动。在图11A中，用户界面10808还显示尺寸调整条10804，其对应 于所显示内容(例如，图像)的多个尺寸。在图11A中，尺寸调整条 10804的左右边界对应于所显示内容(例如，图像)的预定义的尺寸调 整限度。例如，当将控制图标10802移动到尺寸调整条10804的左边界 时，所显示内容(例如，图像)以与预定义的最小尺寸对应的尺寸显示 (例如，所显示图像被缩小到最小容许尺寸)。同样，在将控制图标 10802移动到尺寸调整条10804的右边界时，所显示内容(例如，图 像)以与预定义的最大尺寸对应的尺寸显示(例如，所显示图像被放大 到最大容许尺寸)。

在一些实施例中，设备是具有独立显示器(例如，显示器450)和 独立触敏表面(例如，触敏表面451)的电子设备。在一些实施例中， 设备是便携式多功能设备100，显示器是触敏显示器系统112，并且触 敏表面包括显示器上的触觉输出发生器167(图1A)。为了便于解 释，参考图11A-11T和图12A-12B描述的实施例将参考显示器450和 独立触敏表面451来讨论，然而，类似的操作任选地在具有触敏显示器 系统112的设备上响应于当在触敏显示器系统112上显示图11A-11T 所示的用户界面时检测到图11A-11T所述的接触在触敏显示器系统112 上的移动而执行；在此类实施例中，代替光标10806，焦点选择器任选 地为：相应接触、对应于接触的代表点(例如，相应接触的质心或与相 应接触相关联的点)，或在触敏显示器系统112上检测到的两个或更多 个接触的质心。

图11A-11H示出在触敏表面451上检测到接触10810和包括接触 10810的移动(例如，接触10810从图11A中的位置10810-a到图11B 中的位置10810-b的移动10812-a；接触10810从图11B中的位置 10810-b到图11C、图11D、图11E或图11F中的位置10810-c的移动 10812-b；以及/或者接触10810从图11G或图11H中的位置10810-c的 抬离)的手势。在触敏表面451上的与显示器450上由控制图标10802 占用的区域对应的位置处检测到接触10810(例如，接触10810对应于 显示器上的焦点选择器，诸如在用户界面对象10802的位置处或附近的 光标10806)。在一些实施例中，接触10810在触敏表面451上的移动 对应于焦点选择器(例如，光标10806)在显示器450上的移动(例 如，如图11A-11F所示)。

图11A-11B示出手势的开始的示例，其中设备根据接触10810的 移动10812-a调整图像10814、10816、10818、10820、10822、10824、 10826、10828和10830的尺寸，该移动10812-a控制光标10806的移 动，该光标的移动对应于控制图标10802在尺寸调整条10804中的移 动。在图11B中，设备不生成对应于超过预定义的调整限度(例如， 对应于尺寸调整条10804的末端的尺寸限度)的触觉输出，因为尚未超 过预定义的调整限度。图11B示出一个示例，其中根据确定对参数 (例如，尺寸)的调整将不会使得一个或多个预定义的调整限度被超过 (例如，控制图标10802移动到显示器的相应区域中，该相应区域在由 尺寸调整条10804的右边界指示的预定义的调整限度内)，电子设备对 所述参数进行调整而不在触敏表面上生成触觉输出(例如，设备根据对 应于控制图标10802在显示器相应区域中的当前位置的所述参数的值而 将在用户界面10808中显示的图像10814、10816、10818、10820、 10822、10824、10826、10828和10830的尺寸增大到小于预定义的最 大尺寸限度的尺寸)。相比之下，下文描述的图11C-11F示出如下示 例，其中根据确定对参数(例如，尺寸)的调整将使得一个或多个预定 义的调整限度被超过(例如，其中接触10810在触敏表面451上的移动 对应于将所显示图片的尺寸调整为超过由尺寸调整条10804的右边界指 示的预定义的限度)，触觉输出发生器167在触敏表面451上生成触觉 输出10832。

图11B-11F示出各种示例，其中设备检测到包括接触10810的移动 10812-b的手势的延续，该手势的延续控制光标10806超出尺寸调整条 10804的末端的移动。在图11C中，响应于检测到包括移动10812-b的 手势的延续，设备继续将图像的尺寸增大到预定义的调整限度(例如， 尺寸限度)并且根据光标10806的移动将控制图标10802移动超出尺寸 调整条10804的末端。在图11D中，响应于检测到包括移动10812-b的 手势的延续，设备继续将图像的尺寸增大到预定义的调整限度(例如， 尺寸限度)并且根据光标10806的移动将控制图标10802移动直到尺寸 调整条10804的末端。在图11E中，响应于检测到包括移动10812-b的 手势的延续，设备取消与手势对应的图像尺寸增大并且根据光标10806 的移动将控制图标10802移动直到尺寸调整条10804的末端。在图11F 中，响应于检测到包括移动10812-b的手势的延续，设备继续将图像的 尺寸增大超过预定义的调整限度(例如，尺寸限度)并且根据光标 10806的移动将控制图标10802移动超出尺寸调整条10804的末端。

图11C和11F示出如下示例，其中设备检测到接触10810在触敏 表面451上的移动10812-b，该移动对应于光标10806和控制图标 10802移动越过显示器450上显示的尺寸调整条10804的右边界(例 如，光标10806和控制图标10802移动到显示器的相应区域中，该相应 区域对应于针对所显示内容的超过预定义的调整限度的参数调整)。

图11D-11E示出如下示例，其中设备检测到接触10810在触敏表 面451上的移动10812-b，该移动对应于光标10806移动越过显示器 450上显示的尺寸调整条10804的右边界(例如，控制图标10802移动 到显示器的相应区域中，该相应区域对应于针对所显示内容的超过预定 义的调整限度的参数调整)和控制图标10802移动到显示器上显示的尺 寸调整条10804的右边界(例如，控制图标10802移动到显示器的相应 区域中，该相应区域对应于所显示内容的预定义的调整限度，即使接触 10810的移动10812-b的程度对应于超过预定义的调整限度的对参数的 调整)。

图11C-11F示出如下示例，其中根据确定对参数(例如，尺寸) 的调整将使得一个或多个预定义的调整限度被超过(例如，其中接触 10810的移动10812-b的程度对应于超过由尺寸调整条10804的右边界 指示的预定义的限度的对所显示图片的尺寸调整)，触觉输出发生器 167在触敏表面451上生成触觉输出10832，其向用户指示该手势对应 于对将超过预定义的调整限度的参数的调整。

图11C-11D示出如下示例，其中根据确定对参数的调整将使得一 个或多个预定义的调整限度被超过，调整参数以使得达到预定义的调整 限度(例如，将用户界面10808上显示的图像10814、10816、10818、 10820、10822、10824、10826、10828和10830的尺寸增大到预定义最 大尺寸限度)。

图11E示出如下示例，其中根据确定对参数的调整将使得一个或 多个预定义的调整限度被超过，取消对参数的调整(例如，将用户界面 10808上显示的图像10814、10816、10818、10820、10822、10824、 10826、10828和10830的尺寸调整回到在检测到接触10810的移动 10812-a和10812-b之前显示的图像的尺寸)。

图11F示出如下示例，其中根据确定对参数的调整将使得一个或 多个预定义的调整限度被超过，相应地调整参数以使得超过预定义的调 整限度(例如，将用户界面10808上显示的图像10814、10816、 10818、10820、10822、10824、10826、10828和10830的尺寸增大到 超过预定义最大尺寸限度)。

图11G-11H示出各种示例，其中设备检测接触10810的抬离，该 接触10810用于执行上文参考图11A-11F描述的手势中的一个。图11G 示出如下示例，其中响应于图11F中的接触10810的抬离，对超过预定 义的调整限度的参数的调整是不逆向的(例如，在接触10810的抬离之 后维持图11F中的增大超过预定义最大尺寸限度的在用户界面10808上 显示的图像10814、10816、10818、10820、10822、10824、10826、 10828和10830的尺寸。)在该示例中，响应于检测到接触10810的抬 离，设备将控制图标10802移动返回到滚动条10804的末端。图11H 示出如下示例，其中响应于图11F中的接触10810的抬离，部分地逆向 超过预定义的调整限度的参数调整以匹配预定义的调整限度(例如，在 接触10810的抬离之后将图11F中的增大超过预定义的最大尺寸限度的 在用户界面10808上显示的图像10814、10816、10818、10820、 10822、10824、10826、10828和10830的尺寸缩回到预定义的最大尺 寸限度。)图11G示出如下示例，其中响应于图11F中的接触10810 的抬离，调整控制图标10802的显示以对应于尺寸调整条10804的右边 界(例如，控制图标10802移动回到尺寸调整条10804的右边界)。

图11I-11K示出在触敏表面451上检测到的接触10840和包括接触 10840的移动10842的手势(例如，接触10840从图11I中的位置 10840-a到图11J中的位置10840-b的移动10842-a和/或接触10840从 图11J中的位置10840-b到图11K中的位置10840-c的移动10842- b)。在触敏表面451上的与显示器450上由控件10836占用的区域对 应的位置处检测到接触10840(例如，接触10840对应于显示器上的焦 点选择器，诸如在用户界面对象10836的位置处或附近的光标 10806)。图11I-11K中的手势包括触敏表面451上的接触10840的移 动10842，该移动对应于显示器450上的焦点选择器(例如，光标 10806)的移动。

在一些实施例中，如图11I-11K所示，内容是媒体剪辑(例如，媒 体剪辑10844、10846、10848、10850、10852和/或10854)，其包括音 频(例如，音频10834)，参数是音量水平(例如，音量水平 10836)，预定义的调整限度包括剪辑限度(例如，剪辑限度 10838)，并且当出现在内容中的最大音量高于剪辑限度时，剪辑限度 被超过。例如，如图11J所示，响应于检测到与将不会致使预定义的调 整限度被超过的参数调整对应的接触10810的移动10842-a(例如，增 大音量水平10836以使得音频10834的最大音量不超过音量剪辑限度 10838)，电子设备调整参数而不在触敏表面上生成触觉输出。相反， 如图11K所示，响应于检测到与将致使预定义的调整限度被超过的参 数调整对应的接触10810的移动10842-b(例如，增大音量水平10836 以使得音频10834的最大音量超过音量剪辑限度10838)，触觉输出发 生器167在触敏表面451上生成触觉输出10832。

图11L-11N示出在触敏表面451上检测到的接触10860和包括接 触10860的移动10862的手势(例如，接触10860从图11L中的位置 10860-a到图11M中的位置10860-b的移动10862-a和/或接触10860从 图11M中的位置10860-b到图11N中的位置10860-c的移动10862- b)。在触敏表面451上的与显示器450上由控件10858占用的区域对 应的位置处检测到接触10860(例如，接触10860对应于显示器上的焦 点选择器，诸如在用户界面对象10858的位置处或附近的光标 10864)。图11L-11N中的手势包括触敏表面451上的接触10860的移 动10862，该移动对应于显示器450上的焦点选择器(例如，光标 10864)的移动。

在一些实施例中，如图11L-11N所示，内容是媒体剪辑(例如， 媒体剪辑10856)，参数是裁切遮罩(例如，裁切遮罩10858)，预定 义的调整限度包括基于时间的内容边界(例如，媒体剪辑10856的右边 界)，并且当裁切遮罩延伸超出基于时间的内容边界时，基于时间的内 容边界被超过。例如，如图11M所示，响应于检测到与将不会致使预 定义的调整限度被超过的调整对应的接触10860的移动10862-a(例 如，将裁切遮罩10864延伸到媒体剪辑10856的右边界，但不经过该右 边界)，电子设备调整参数(例如，裁切遮罩10858的尺寸)而不在触 敏表面上生成触觉输出。相反，如图11N所示，响应于检测到与将致 使预定义的调整限度被超过的参数调整对应的接触10860的移动 10862-b(例如，将裁切遮罩10864延伸经过媒体剪辑10856的右边 界)，触觉输出发生器167在触敏表面451上生成触觉输出10832。

图11O-11Q示出在触敏表面451上检测到的接触10870和包括接 触10870的移动10872的手势(例如，接触10870从图11O中的位置 10870-a到图11P中的位置10870-b的移动10872-a和/或接触10870从 图11P中的位置10870-b到图11Q中的位置10870-c的移动10872- b)。在触敏表面451上的与显示器450上由控件10866占用的区域对 应的位置处检测到接触10870(例如，接触10870对应于显示器上的焦 点选择器，诸如在用户界面对象10866的位置处或附近的光标 10806)。图11O-11Q中的手势包括触敏表面451上的接触10870的移 动10872，该移动对应于显示器450上的焦点选择器(例如，光标 10806)的移动。

在一些实施例中，如图11O-11Q所示，内容是图像(例如，图像 10868)，参数是裁切遮罩(例如，裁切遮罩10866)，预定义的调整 限度包括内容边界(例如，图像10868的外边缘)，并且当裁切遮罩延 伸超出内容边界时，内容边界被超过。例如，如图11P所示，响应于 检测到与将不会致使预定义的调整限度被超过的参数调整对应的接触 10870的移动10872-a(例如，将裁切遮罩10866延伸到图像10868的 下边沿和右边沿，但不经过这些边沿)，电子设备调整参数(例如，裁 切遮罩10866的尺寸)而不在触敏表面上生成触觉输出。相反，如图 11Q所示，响应于检测到与将致使预定义的调整限度被超过的参数调整 对应的移动10872-b(例如，将裁切遮罩10866延伸经过图像10868的 下边沿和右边沿)，触觉输出发生器167在触敏表面451上生成触觉输 出10832。

图11R-11T示出在触敏表面451上检测到的接触10880和包括接触 10880的移动10882的手势(例如，接触10880从图11R中的位置 10880-a到图11S中的位置10880-b的移动10882-a和/或接触10880从 图11S中的位置10880-b到图11T中的位置10880-c的移动10882- b)。在触敏表面451上的与显示器450上由控件10878占用的区域对 应的位置处检测到接触10880(例如，接触10880对应于显示器上的焦 点选择器，诸如在用户界面对象10878的位置处或附近的光标 10806)。图11R-11T中的手势包括触敏表面451上的接触10880的移 动10882，该移动对应于显示器450上的焦点选择器(例如，光标 10806)的移动。

在一些实施例中，如图11R-11T所示，内容是形状(例如，正方 形10876)，参数是形状调整参数(例如，正方形10876上的角的圆 度)，并且预定义的调整限度包括对相应形状的相应部分的最大容许调 整(例如，用于圆化正方形10876的角的最大半径)。例如，如图11S 所示，响应于检测到与将不会致使预定义的调整限度被超过的参数调整 对应的移动10882-a(例如，使用匹配但不超过预定最大半径的半径圆 化正方形10876的角)，电子设备调整参数(例如，正方形10876的角 的圆度)而不在触敏表面上生成触觉输出。相反，如图11T所示，响 应于检测到与将致使预定义的调整限度被超过的参数调整对应的移动 10882-b(例如，使用超过预定最大半径的半径圆化正方形10876的 角)，触觉输出发生器167在触敏表面451上生成触觉输出10832。

图12A-12B是示出根据一些实施例的当动作将导致参数被调整为 超过预定义的限度时提供反馈的方法10900的流程图。该方法10900是 在具有显示器和触敏表面的电子设备(例如，图3中的设备300，或图 1A中的便携式多功能设备100)处执行的。在一些实施例中，显示器 是触摸屏显示器，并且触敏表面在显示器上。在一些实施例中，显示器 与触敏表面是分开的。方法10900中的一些操作任选地被组合，并且/ 或者一些操作的顺序任选地被改变。

如下文所述，方法10900提供用于当动作将导致参数被调整为超过 预定义的限度时提供反馈的直观方式。该方法减小了当动作将导致参数 被调整为超过预定义的限度时检测反馈时用户的认知负担，从而创建更 有效的人机界面。对于电池驱动的电子设备，使用户能够当动作将导致 参数被调整为超过预定义的限度时更快且更有效地检测反馈节省功率并 且增加电池充电之间的时间。

在一些实施例中，设备在显示器(例如，图11A-11T中的显示器 450)上显示(10902)用于控制与相应的内容(例如，图11A-11H中的图 像10814、10816、10818、10820、10822、10824、10826、10828和 10830的尺寸、图11I-11K中的音频10834的音量水平、图11L-11N中 的应用于媒体剪辑10856的裁切遮罩10858、图11O-11Q中的应用于图 像10868的裁切遮罩10866、或图11R-11T中的正方形10876的角的圆 度)相关联的参数的控件(例如，图11A-11H中的包括尺寸调整条 10804和控制图标10802的尺寸调整控件、图11I-11K中的控件 10836、图11L-11N中的控件10858、图11O-11Q中的控件10866、或 图11R-11T中的控件10878)。

在一些实施例中，在设备显示控件时，设备检测(10904)触敏表面 (例如，触敏表面451)上的用于调整参数的手势(例如，图11A-11H 中的接触10810的移动10812、图11I-11K中的接触10840的移动 10842、图11L-11N中的接触10860的移动10862、图11O-11Q中的接 触10870的移动10872、或图11R-11T中的接触10880的移动 10882)。

在一些实施例中，响应于(10906)检测到手势：设备确定(10908)对 应于手势的程度(例如，在触敏表面上检测到的接触的侧向移动的程 度、旋转的程度或强度增大/减小的程度)的对参数的调整。

响应于(10906)检测到手势：根据确定对参数的调整将使得一个或 多个预定义的调整限度被超过，设备在触敏表面(例如，触敏表面 451)上生成(10910)相应的触觉输出(例如，图11C-11F、图11K、图 11N、图11Q或图11T中的触觉输出10832)。

在一些实施例中，响应于(10906)检测到手势：根据确定对参数的 调整将使得一个或多个预定义的调整限度被超过，设备放弃(10912)调 整参数(例如，如果所请求的调整超过参数的调整限度，则取消对参数 的调整)。例如，如图11C和11E所示，在包括接触10810的移动 10812-b的手势与将超过与尺寸调整条10804的右边界对应的预定义的 调整限度的图像10814、10816、10818、10820、10822、10824、 10826、10828和10830的尺寸调整对应的情况下，在手势之前以对应 于图像的尺寸的放大率显示图像，如图11E所示。

在一些实施例中，响应于(10906)检测到手势：根据确定对参数的 调整将使得一个或多个预定义的调整限度被超过，设备调整(10914)参 数以使得达到预定义的调整限度(例如，参数的调整的程度由预定调整 限度限制)。例如，如图11C-11D所示，在包括接触10810的移动 10812-b的手势与将超过与尺寸调整条10804的右边界对应的预定义的 调整限度的图像10814、10816、10818、10820、10822、10824、 10826、10828和10830的尺寸调整对应的情况下，以对应于预定义的 最大尺寸调整限度的放大率显示图像，如图11D所示。在一些实施例 中，将参数调整到相应的预定义的调整限度，但不超过相应的预定义的 调整限度(例如，将滑动条上的滑块调整到滑动条的末端，但不更 远)。

在一些实施例中，响应于(10906)检测到手势：根据确定对参数的 调整将使得一个或多个预定义的调整限度被超过，设备执行(10916)对 参数的调整(例如，对参数的调整的程度不受预定调整限度限制)。例 如，如图11F所示，在包括接触10810的移动10812-b的手势与将超过 与尺寸调整条10804的右边界对应的预定义的调整限度的图像10814、 10816、10818、10820、10822、10824、10826、10828和10830的尺寸 调整对应的情况下，以对应于超过预定义最大尺寸调整限度的尺寸的放 大率显示图像(例如，即使以该方式调整参数使得一个或多个预定义的 调整限度被超过)，如图11F所示。例如，允许用户将裁切遮罩延伸 到画布之外(例如，如图11Q所示)或超出媒体剪辑的末端(例如， 如图11N所示)，但设备向用户警示在裁切遮罩处于画布之外或超出 媒体剪辑的末端时裁切将向相应的内容添加空白内容。

在一些实施例中，内容是(10918)媒体剪辑(例如，图11I-11K中 的媒体剪辑10844、10846、10848、10850、10852和/或10854)，其包 括音频(例如，图11I-11K中的音频10834)，参数是音量水平(例 如，图11I-11K中的音量水平10836)，预定义的调整限度包括剪辑限 度(例如，图11I-11K中的剪辑限度10838)，并且当出现在内容中的 最大音量高于剪辑限度时(例如，当在图11K中音频10834的最高峰 超过剪辑限度10838时)，剪辑限度被超过。在一些实施例中，剪辑限 度是模拟剪辑限度(例如，声音由放大器的物理/电特性限制，使得高 于剪辑限度的声音将推动放大器以创建功率比其电源可产生的功率更大 的信号，并且因此放大器仅将信号放大到其最大容量)。在一些实施例 中，剪辑限度是数字剪辑限度(例如，信号由声音的预先确定的范围的 数字表示限制，并且幅度高于所选数字表示的范围的声音将被表示为最 大数字表示)。

在一些实施例中，内容是(10920)媒体剪辑(例如，图11L-11N中 的媒体剪辑10856)，参数是裁切遮罩(例如，图11L-11N中的裁切遮 罩10858)，预定义的调整限度包括基于时间的内容边界(例如，图 11L-11N中的媒体剪辑10856的右边界)，并且当裁切遮罩延伸超出基 于时间的内容边界时(例如，用户试图在媒体剪辑的开始时间之前、或 在媒体剪辑的结束时间之后执行对应于修剪媒体剪辑的操作)，基于时 间的内容边界被超过。例如，如图11N所示，当裁切遮罩10858延伸 经过媒体剪辑10856的右侧基于时间的内容边界时，基于时间的内容边 界被超过。

在一些实施例中，内容是图像(例如，图11O-11Q中的图像 10868)，参数是裁切遮罩(例如，图11O-11Q中的裁切遮罩 10866)，预定义的调整限度包括内容边界(例如，图11O-11Q中的图 像10868的外边缘)，并且当裁切遮罩延伸超出内容边界(例如，超出 图像的边沿)时，内容边界被超过。例如，如图11Q所示，当裁切遮 罩10866延伸超出图像10868的下边沿和右边沿时，内容边界被超过。

在一些实施例中，内容是形状(例如，图11R中的正方形 10876)，参数是形状调整参数(例如，图11R-11T中的对应于正方形 10876的拐角的圆度的参数)，并且预定义的调整限度包括对相应形状 的相应部分的最大容许调整(例如，图11R-11T中的用于圆化正方形 10876的拐角的最大半径)。在一些实施例中，形状调整参数是例如形 状拐角的圆度、不透明度或线宽度。在一些实施例中，预定义的调整限 度是例如用于圆化拐角的最大半径、最小/最大不透明度、或最小/最大 线宽度。

响应于(10906)检测到手势：根据确定对参数的调整将不会使得一 个或多个预定义的调整限度被超过，设备执行(10926)对参数的调整而 不在触敏表面(例如，触敏表面451)上生成相应的触觉输出(例如， 对应于超过预定义的调整限度的触觉输出)。例如，如图11B、11J、 11M、11P和11S所示，在手势与不超过预定义的调整限度的参数调整 对应的情况下，执行调整并且不在触敏表面上生成触觉输出。

应当理解，对图12A-图12B中已经进行描述的操作的特定顺序仅 仅是示例性的，并非意图表明所述顺序是可以执行这些操作的唯一顺 序。本领域的普通技术人员会想到各种方式来对本文所述的操作进行重 新排序。另外，应当指出的是，本文中相对于本文描述的其他方法(例 如，段落[0058]中列出的那些方法)所描述的其他过程的细节也以类似 的方式适用于上文相对于图12A-12B描述的方法10900。例如，上文参 考方法10900描述的接触、手势、用户界面对象、触感和焦点选择器任 选地具有本文中参考本文描述的其他方法(例如，段落[0058]中列出的 那些方法)描述的接触、手势、用户界面对象、触感和焦点选择器的一 个或多个特性。为简明起见，这里不重复这些细节。

根据一些实施例，图13示出根据各种所描述的实施例的原理配置 的电子设备11000的功能框图。该设备的功能块任选地由进行各种所描 述的实施例的原则的硬件、软件、或硬件和软件的组合来实现。本领域 的技术人员应当理解，图13中所述的功能块任选地被组合或被分离为 子块以实现各种所描述的实施例的原理。因此，本文的描述任选地支持 本文所述功能块的任何可能的组合或分离或进一步限定。

如图13所示，电子设备11000包括显示单元11002，其被配置为 显示用于控制与相应的内容相关联的参数的控件；触敏表面单元 11004，其被配置为接收用户接触；任选地包括一个或多个传感器单元 11006，其被配置为检测与触敏表面单元11004的接触的强度；以及处 理单元11008，其耦接到显示单元11002、触敏表面单元11004，并且 任选地耦接到一个或多个传感器单元11006。在一些实施例中，处理单 元11008包括显示使能单元11010、检测单元11012、确定单元 11014、生成单元11016和调整单元11018。

在一些实施例中，处理单元11008被配置为(例如，使用显示使能 单元11010)使能用于控制与相应的内容相关联的参数的控件的显示。 在一些实施例中，处理单元11008被进一步配置为(例如，使用检测单 元11012)检测触敏表面单元11004上的手势以用于调整参数；并且响 应于检测到手势：处理单元11008被配置为(例如，使用确定单元 11014)确定对应于手势的程度的对参数的调整；根据确定对参数的调 整将使得一个或多个预定义的调整限度被超过，处理单元11008被配置 为(例如，使用生成单元11016)在触敏表面单元上生成相应的触觉输 出；并且根据确定对参数的调整将不会使得一个或多个预定义的调整限 度被超过，处理单元11008被配置为(例如，使用调整单元11018)执 行对参数的调整而不在触敏表面单元11004上生成相应的触觉输出。

在一些实施例中，处理单元11008被进一步配置为，根据确定对参 数的调整将使得一个或多个预定义的调整限度被超过，(例如，使用调 整单元11018)放弃调整参数。

在一些实施例中，处理单元11008被进一步配置为，根据确定对参 数的调整将使得一个或多个预定义的调整限度被超过，(例如，使用调 整单元11018)调整参数以使得达到预定义的调整限度。

在一些实施例中，处理单元11008被进一步配置为，根据确定对参 数的调整将使得一个或多个预定义的调整限度被超过，(例如，使用调 整单元11018)执行对参数的调整。

在一些实施例中，内容是包括音频的媒体剪辑，参数是音量水 平，预定义的调整限度包括剪辑限度，并且当出现在内容中的最大音量 高于剪辑限度时剪辑限度被超过。

在一些实施例中，内容是媒体剪辑，参数是裁切遮罩，预定义的 调整限度包括基于时间的内容边界，并且当裁切遮罩延伸超出基于时间 的内容边界时基于时间的内容边界被超过。

在一些实施例中，内容是图像，参数是裁切遮罩，预定义的调整 限度包括内容边界，并且当裁切遮罩延伸超出内容边界时内容边界被超 过。

在一些实施例中，内容是形状，参数是形状调整参数，并且预定 义的调整限度包括对相应形状的相应部分的最大容许调整。

上述信息处理方法中的操作任选地通过运行信息处理装置中的一 个或多个功能模块来实现，该信息处理装置诸如为通用处理器(例如， 如以上相对于图1A和图3所描述)或特定于应用的芯片。

以上参考图12A-12B所述的操作任选地由图1A-1B或图13中所描 绘的部件来实现。例如，检测操作10904和确定操作10908、10910、 10912、10914、10916和10926任选地由事件分类器170、事件识别器 180和事件处理程序190来实现。事件分类器170中的事件监视器171 检测触敏显示器112上的接触，并且事件分配器模块174将事件信息递 送到应用程序136-1。应用程序136-1的相应事件识别器180将事件信 息与相应事件定义186进行比较，并且确定触敏表面上的第一位置处的 第一接触是否对应于预定义事件或子事件，诸如对用户界面上的对象的 选择、对与相应的内容相关联的参数的调整、或触觉输出的生成(例 如，对应于确定对参数的调整将使得一个或多个预定义的调整限度被超 过)。当检测到相应的预定义的事件或子事件时，事件识别器180激活 与检测到该事件或子事件相关联的事件处理程序190。事件处理程序 190任选地使用或调用数据更新器176或对象更新器177来更新应用程 序内部状态192。在一些实施例中，事件处理程序190访问相应GUI更 新器178来更新应用程序显示的内容。类似地，本领域技术人员会清楚 地知道基于在图1A-1B中所示的部件可如何实现其他过程。

提供对应于时钟的触觉反馈

许多电子设备具有包括时钟的表示的图形用户界面。例如，许多 蜂窝电话、膝上型计算机和平板具有在图形用户界面上突出显示的时钟 的表示。通常有需要向用户提供用于接收与时钟对应的反馈的有效且便 利的方式。以下实施例通过生成用户的对应于时钟的触觉输出(例如， 触觉输出的“滴答”模式)来改进现有方法，所述触觉输出指示焦点选 择器位于时钟的表示上方，并且任选地提供对时间正在过去的速率的指 示。

图14A-14J示出根据一些实施例的用于提供对应于时钟的触觉反馈 的示例性用户界面。这些附图中的用户界面用于示出下文描述的过程， 包括下文参考图15A-15B描述的过程。

图14A示出包括时钟的表示的用户界面的示例。用户界面11100 显示在设备(例如，设备300)的显示器450上并且响应于触敏表面 451上的接触(例如，手指接触)。用户界面11100包括时钟的表示 11102。图14A还示出触敏表面451上的接触11106，以及根据一些实 施例，在位置11104-a处的对应于接触11106的焦点选择器(例如，光 标11104)的显示表示。

在一些实施例中，设备是便携式多功能设备100，显示器是触敏显 示器系统112，并且触敏表面包括显示器上的触觉输出发生器167(图 1A)。为了便于解释，参考图14A-14J和图15A-15B描述的实施例将 参考显示器450和独立触敏表面451来讨论，然而，类似操作任选地响 应于当在触敏显示器系统112上显示图14A-14J中所示的用户界面时在 触敏显示器系统112上检测到图14A-14J中所述的接触而在具有触敏显 示器系统112的设备上执行；在此类实施例中，代替光标11104，焦点 选择器任选地为：相应接触、对应于接触的代表点(例如，相应接触的 质心或与相应接触相关联的点)，或在触敏显示器系统112上检测到的 两个或更多个接触的质心。

图14A和14B示出在时钟的表示上方检测焦点选择器的示例。在 该示例中，在触敏表面451上检测到接触11106和接触11106的移动 11108。焦点选择器(例如，光标11104)的对应于移动11108的移动 致使焦点选择器(例如，光标11104)从图14A中的不在时钟的表示 11102上方的位置11104-a移动到图14B中的在时钟的表示11102上方 的位置11104-b，并且设备开始在触敏表面451上提供触觉反馈11110 (例如，生成对应于滴答感觉的触觉输出)。

图14C示出当在时钟的表示上方检测焦点选择器时连续提供触觉 反馈的示例。在该示例中，位置11104-b处的光标11104位于时钟的表 示11102上方，并且触觉反馈11110在触敏表面451上连续被提供。如 下文参考图14B所讨论，触觉反馈11110包括触敏表面451上的规则 模式的触觉输出。

图14C和14D示出焦点选择器的将焦点选择器维持在时钟的表示 上方的移动的示例。在该示例中，焦点选择器(例如，光标11104)最 初处于位置11104-b处，如图14C所示。如图14D所示，在触敏表面 451上检测到接触11112和移动11114，并且光标11104的对应移动致 使光标11104移动到位置11104-c。由于光标11104在处于位置11104-c 处时位于时钟的表示11102上方，所以在触敏表面451上提供触觉反馈 11110。在一些实施例中，规则模式的触觉反馈的周期不是基于焦点选 择器(例如，光标11104)的将焦点选择器(例如，光标11104)维持 在时钟的表示11102上方的移动。例如，在一些实施例中，在光标 11104保持在时钟的表示11102上方时，规则模式的触觉反馈的周期与 光标11104的移动无关。

图14D和14E示出焦点选择器远离时钟的表示的移动并且因此停 止提供与时钟对应的触觉反馈的示例。在该示例中，光标11104最初处 于位置11104-c处，如图14D所示。如图14E所示，在触敏表面451上 检测到接触11116和移动11118，并且光标11104的对应移动致使光标 11104移动到位置11104-d。由于光标11104在处于位置11104-d处时 不再位于时钟的表示11102上方，所以不再在触敏表面451上提供触觉 反馈。

图14F-14H示出用于生成触觉反馈的移动轮廓的示例性波形。图 14F示出具有周期11130-1的三角形波形。图14G示出具有周期11130- 2的正方形波形，并且图14H示出具有周期11130-3的锯齿形波形。在 一些实施例中，将在生成对应于时钟的触觉反馈11110时利用图14F- 14H中所示的移动轮廓中的一个，如上所述。在这些示例中，由于规则 模式包括单个波形的重复，所以规则模式的周期与规则模式中的各个波 形的周期相同。在一些实施例中，规则模式的周期(例如，从峰到峰或 前沿到前沿)是1秒。

根据一些实施例，图14I-14J示出包括交替序列的输出的移动轮廓 的示例性波形。在一些实施例中，触觉反馈11110包括具有不同输出特 征的交替序列的触觉输出。图14I示出交替序列的具有大约相同周期且 具有不同幅度11132-1和11132-2的正方形波。图14J示出交替序列的 具有大约相同周期和幅度的正方形波和锯齿形波。在一些实施例中，规 则模式的周期(例如，从具有相同移动轮廓的输出的峰到峰或前沿到前 沿)是2秒，使得两个连续输出之间的时间是1秒或大约1秒(例如， 滴与答之间的时间是1秒，并且答与滴之间的时间是1秒)。

在一些实施例中，触觉反馈11110包括触敏表面451上的除了图 14F-14J中所示的触觉输出之外的其他规则模式的触觉输出。例如，规 则模式可为重复生成的一系列分量波形，其具有一系列长度L(其中L 是大于0的整数)。在一些实施例中，一系列分量波形中的至少一个分 量在至少一个方面(例如，幅度、周期和/或形状)不同于其他分量中 的至少一个。在一些实施例中，一系列分量波形中的每个分量波形在至 少一个方面(例如，幅度、周期和/或形状)不同于其他分量，而在其 他实施例中，该序列中的一些分量(“重复分量”)是相同的(例如， 一系列L分量中的每第N个分量是相同的)，而其他分量不同于重复 分量。在这些实施例中，规则模式的周期是用于生成分量波形的周期 (即，从规则模式的第一实例的开始时间直到规则模式的下一个实例的 开始时间)。

图15A-15B是示出根据一些实施例的提供对应于时钟的触觉反馈 的方法11200的流程图。方法11200在具有显示器和触敏表面的电子设 备(例如，图3中的设备300，或图1A中的便携式多功能设备100) 处执行。在一些实施例中，显示器是触摸屏显示器，并且触敏表面在显 示器上。在一些实施例中，显示器与触敏表面是分开的。方法11200中 的一些操作任选地被组合，并且/或者一些操作的顺序任选地被改变。

如下所述，方法11200提供用于提供对应于时钟的触觉反馈的直观 方式。该方法减小当显示时钟时用户的认知负担，从而创建更有效的人 机界面。对于电池驱动的电子设备，使用户能够更快且更有效地与时钟 进行交互节省功率并且增加电池充电之间的时间。

设备显示(11202)时钟的表示。例如，图14A示出在图形用户界面 11100中显示的时钟的表示11102。在一些实施例中，在时钟的表示上 方检测焦点选择器之前，设备显示(11204)时钟的表示而不在触敏表面 上提供对应于时钟的触觉反馈(例如，在焦点选择器在时钟上方移动之 前不生成对应于时钟的滴答输出)。在图14A中，例如，光标11104 处于位置11104-a处并且不在时钟的表示11102上方，并且因此设备不 生成触觉反馈11110。

在显示时钟的表示时，设备检测(11206)焦点选择器在时钟的表示 上方的移动。如图14B所示，例如，光标11104从不在时钟的表示上 方的位置11104-a移动到在时钟的表示11102上方的位置11104-b。当 在时钟的表示上方检测焦点选择器时，设备提供(11208)对应于时钟的 触觉反馈，其中触觉反馈包括触敏表面上的规则模式的触觉输出。例 如，图14C示出在时钟的表示11102上方的位置11104-b处的光标 11104和在触敏表面451上提供的触觉反馈11110，其中触觉反馈包括 规则模式的触觉输出，诸如上文参考图14F-14J描述的那些触觉输出。

在一些实施例中，以均匀间隔的时间间隔生成规则模式的触觉输 出中的触觉输出(11210)。例如，在一些实施例中，触觉输出的规则模 式的周期将为1秒。在一些其他实施例中，触觉输出的规则模式的周期 将为0.5秒、2秒或在0.25秒与10秒之间的其他时间长度。

在一些实施例中，触敏表面上的触觉输出的规则模式包括上文参 考图14F-14J描述的规则模式中的一个。例如，在一些实施例中，触敏 表面上的触觉输出的规则模式包括具有不同输出特征的交替序列的触觉 输出(11212)。例如，在一些实施例中，触敏表面上的触觉输出的模式 将生成滴答感觉，其中“滴”触觉输出和“答”触觉输出被选择以便产 生使用户感觉起来与对应于“答”触觉输出的“答”感觉不同的对应于 “滴”触觉输出的“滴”感觉。例如，图14I-14J示出包括交替序列的 输出的移动轮廓的示例性波形。

在一些实施例中，交替序列的触觉输出包括与具有不同幅度的第 二类型的触觉输出交替的第一类型的触觉输出(11214)。例如，在一些 实施例中，将利用图14F-14H中所示的移动轮廓的波形的各种组合。 在一些实施例中，第一类型的触觉输出由触敏表面的包括第一主要移动 分量的移动(例如，与第一触觉输出的忽略任何非预期谐振的初始脉冲 对应的移动)生成。在一些实施例中，第二类型的触觉输出由触敏表面 的包括第二主要移动分量的移动(例如，与第二触觉输出的忽略任何非 预期谐振的初始脉冲对应的移动)生成。在一些实施例中，第一主要移 动分量和第二主要移动分量具有相同移动轮廓(例如，相同波形形状， 诸如正方形、正弦形、squine、锯齿形或三角形；和/或大约相同宽度/ 周期)和不同幅度。例如，图14I示出带有具有不同幅度11132-1和 11132-2的交替正方形波的移动轮廓的示例性波形。

在一些实施例中，交替序列的触觉输出包括与具有不同移动轮廓 的第二类型的触觉输出交替的第一类型的触觉输出(11216)。例如，在 一些实施例中，将利用图14F-14H中所示的移动轮廓的波形的各种组 合。在一些实施例中，第一类型的触觉输出由触敏表面的包括第一主要 移动分量的移动(例如，与第一触觉输出的忽略任何非预期谐振的初始 脉冲对应的移动)生成。在一些实施例中，第二类型的触觉输出由触敏 表面的包括第二主要移动分量的移动(例如，与第二触觉输出的忽略任 何非预期谐振的初始脉冲对应的移动)生成。在一些实施例中，第一主 要移动分量和第二主要移动分量具有不同移动轮廓(例如，不同波形形 状，诸如正方形、正弦形、squine、锯齿形或三角形；和/或不同宽度/ 周期)和相同幅度。例如，图14J示出带有具有相同幅度的交替正方形 波和锯齿形波的移动轮廓的示例性波形。

在一些实施例中，当在时钟的表示上方检测(11218)焦点选择器 时，设备检测(11220)焦点选择器的将焦点选择器维持在时钟的表示上 方的移动，并且响应于检测到焦点选择器的移动，设备继续提供(11222) 对应于时钟的触觉反馈而不改变规则模式的周期。在一些实施例中，在 位于时钟的表示上方时不基于焦点选择器的移动来改变触觉输出的规则 模式的周期。例如，根据这些实施例，当光标11104从图14C中的位 置11104-b移动到图14D中的位置11104-c时，触觉反馈11110的周期 将不改变。

在提供触觉反馈时，设备检测(11224)焦点选择器远离时钟的表示 的移动。例如，图14E示出光标11104移动到远离时钟的表示11102的 位置11104-d。响应于检测到焦点选择器远离时钟的表示的移动，设备 停止(11226)提供对应于时钟的触觉反馈。例如，这在图14D-14E中示 出。在图14D中，光标11104在位于时钟的表示11102上方的位置 11104-b处，并且设备提供触觉反馈11110。然而，在图14E中，光标 11104移动到远离时钟的表示11102的位置11104-d，并且设备停止生 成触觉反馈11110。

应当理解，对图15A-15B中已经进行描述的操作的特定顺序仅仅 是示例性的，并非意图表明所述顺序是可以执行这些操作的唯一顺序。 本领域的普通技术人员会想到各种方式来对本文所述的操作进行重新排 序。另外，应当指出的是，本文中相对于本文描述的其他方法(例如， 段落[0058]中列出的那些方法)所描述的其他过程的细节也以类似的方 式适用于上文相对于图15A-15B描述的方法11200。例如，上文参考方 法11200描述的接触、焦点选择器和触觉反馈(例如，触觉输出)任选 地具有本文中参考本文描述的其他方法(例如，段落[0058]中列出的那 些方法)描述的接触、焦点选择器和触觉反馈(例如，触觉输出)的一 个或多个特性。为简明起见，这里不重复这些细节。

根据一些实施例，图16示出根据各种所描述的实施例的原理配置 的电子设备11300的功能框图。该设备的功能块任选地由进行各种所描 述的实施例的原则的硬件、软件、或硬件和软件的组合来实现。本领域 的技术人员应当理解，图16中所述的功能块任选地被组合或被分离为 子块以实现各种所描述的实施例的原理。因此，本文的描述任选地支持 本文所述功能块的任何可能的组合或分离或进一步限定。

如图16所示，电子设备11300包括：显示单元11302，其被配置 为显示时钟的表示；触敏表面单元11304；以及处理单元11306，其耦 接到显示单元11302和触敏表面单元11304。在一些实施例中，处理单 元包括检测单元11308、显示使能单元11310、反馈单元11312和生成 单元11314。

处理单元11306被配置为：(例如，使用检测单元11308)检测焦 点选择器在时钟的表示上方的移动，当在时钟的表示上方检测到焦点选 择器时，(例如，使用反馈单元11312)提供对应于时钟的触觉反馈， 其中触觉反馈包括触敏表面单元上的规则模式的触觉输出。处理单元被 进一步配置为，在提供触觉反馈时，(例如，使用检测单元11308)检 测焦点选择器远离时钟的表示的移动，并且响应于检测到焦点选择器远 离时钟的表示的移动，(例如，使用反馈单元11312)停止提供对应于 时钟的触觉反馈。

在一些实施例中，以均匀间隔的时间间隔生成规则模式的触觉输 出中的触觉输出(例如，使用生成单元11314)。

在一些实施例中，处理单元11306被进一步配置为，当在时钟的表 示上方检测到焦点选择器(例如，使用检测单元11308)时，检测将焦 点选择器维持在时钟的表示上方的焦点选择器的移动(例如，使用检测 单元11308)，并且响应于检测到焦点选择器的移动，继续提供对应于 时钟的触觉反馈(例如，使用反馈单元11312)而不改变规则模式的周 期。

在一些实施例中，处理单元11306被进一步配置为，在时钟的表示 上方检测到焦点选择器之前，在显示单元上显示时钟的表示(例如，使 用显示使能单元11310)而不在触敏表面单元上提供对应于时钟的触觉 反馈。

在一些实施例中，触敏表面单元上的触觉输出的规则模式包括具 有不同输出特征的交替序列的触觉输出。

在一些实施例中，交替序列的触觉输出包括与第二类型的触觉输 出交替的第一类型的触觉输出，第一类型的触觉输出由触敏表面单元的 包括第一主要移动分量的移动来生成(例如，使用生成单元11314)， 第二类型的触觉输出由触敏表面单元的包括第二主要移动分量的移动来 生成(例如，使用生成单元11314)，并且第一主要移动分量和第二主 要移动分量具有相同的移动轮廓和不同的幅度。

在一些实施例中，交替序列的触觉输出包括与第二类型的触觉输 出交替的第一类型的触觉输出，第一类型的触觉输出由触敏表面单元的 包括第一主要移动分量的移动来生成(例如，使用生成单元11314)， 第二类型的触觉输出由触敏表面单元的包括第二主要移动分量的移动来 生成(例如，使用生成单元11314)，并且第一主要移动分量和第二主 要移动分量具有不同的移动轮廓和相同的幅度。

上述信息处理方法中的操作任选地通过运行信息处理装置中的一 个或多个功能模块来实现，该信息处理装置诸如为通用处理器(例如， 如以上相对于图1A和图3所描述)或特定于应用的芯片。

以上参考图15A-15B所述的操作任选地由图1A-1B或图16中所描 绘的部件来实现。例如，检测操作11206、11220和11224以及触觉反 馈操作11208任选地由事件分类器170、事件识别器180和事件处理程 序190来实现。事件分类器170中的事件监视器171检测触敏显示器 112上的接触，并且事件分配器模块174将事件信息递送到应用程序 136-1。应用程序136-1的相应的事件识别器180将事件信息与相应的 事件定义186进行对比，并且确定触敏表面上的第一位置处的第一触点 是否对应于预定义的事件或子事件，诸如选择用户界面上的一个对象。 当检测到相应的预定义的事件或子事件时，事件识别器180激活与检测 到该事件或子事件相关联的事件处理程序190。事件处理程序190任选 地使用或调用数据更新器176或对象更新器177来更新应用程序内部状 态192。在一些实施例中，事件处理程序190访问相应GUI更新器178 来更新应用程序显示的内容。类似地，本领域技术人员会清楚地知道基 于在图1A-1B中所示的部件可如何实现其他过程。

提供与一首音乐的节拍对应的触觉反馈

许多电子设备具有显示应用程序窗口的图形用户界面，所述应用 程序窗口示出一首音乐的表示(例如，用于该首音乐的专辑的一张封面 的图形表示、指示当前正在播放的一首音乐的区域或对应于一首音乐的 乐谱的图形表示中的一首音乐的音符)。例如，媒体播放器应用程序窗 口(例如，音频或视频播放器)任选地包括显示区域，其提供关于一首 选定音乐的信息(例如，该首音乐的名称、作曲者、艺术家、相关联的 专辑、录制日期、发布者和/或长度)。同样，合成应用程序窗口任选 地显示正在合成的一首音乐的乐谱的交互表示，从而允许用户通过添 加、移除或改变乐谱中显示的音符来操纵该首音乐。考虑到包括与具有 音频分量和视觉分量两者的应用程序(例如，音乐回放、音乐合成、视 频回放或视频合成应用程序)对应的应用程序窗口的用户界面环境的复 杂性，需要提供使得用户能够更有效且便利地导航通过用户界面环境的 反馈。

下文描述的实施例提供用于向导航复杂用户界面环境的用户生成 反馈的改进方法和用户界面。更具体地讲，这些方法和用户界面提供与 在显示器上表示的一首音乐的节拍对应的反馈。触觉反馈向用户提供对 该首音乐的节拍的感觉。这样，下文提供的方法和用户界面通过提供触 觉反馈代替听觉和/或视觉反馈或提供除听觉和/或视觉反馈之外的触觉 反馈来允许用户更有效且便利地实现对音乐的节拍的理解以及对整首音 乐的更好理解。例如，在一些实施例中，搜索具有特定节拍的一首音乐 (例如，以为视觉显示伴奏或在跑步时听)的用户在显示器上在该首音 乐的表示上方移动焦点选择器，并且接收与该音乐的节拍对应的触觉反 馈而不必听该音乐。同样，在一些实施例中，合成一首音乐的用户在其 正合成的音乐作品的表示上方移动焦点选择器，并且接收与该音乐的节 拍对应的触觉反馈，从而促进合成过程。

一些用于感测一首音乐的节拍的方法依赖于用户听该首音乐并且 自己获得节拍。用于感测一首音乐的节拍的其他方法依赖于用户检测与 该音乐的节拍对应的视觉提示(例如，显示器上的闪光或脉冲)。然 而，存在许多将要调低或消除电子设备的音量，从而致使可听提示无效 的情形(例如，在上班时、在剧院中，以及在各种社交场合中)。有利 地，下文描述的方法和用户界面通过提供用于指示用户界面对象已被选 定和/或激活的触觉反馈来增强或替换听觉。

图17A-17L示出根据一些实施例的用于提供与一首音乐的节拍对 应的反馈的示例性用户界面。这些附图中的用户界面被用于阐释下文描 述的过程，包括图18A-18B中的过程。图17A-17B、图17G-17I和图 17K-17L包括强度图，其示出触敏表面上的接触相对于包括接触检测强 度阈值(例如，“IT₀”)和轻按压强度阈值(例如，“IT_L”)的多个 强度阈值的当前强度。在一些实施例中，与下文参考IT_L描述的那些操 作类似的操作是参考不同的强度阈值(例如，“IT_D”)来执行的。在 一些实施例中，下文描述的操作不依赖于接触的强度。图17C、图 17E-17G和图17J包括乐谱和波形图，所述波形图示出对应于响应于触 觉输出生成事件(例如，一首音乐中的节拍的选择或回放)在触敏表面 上生成的触觉输出的波形的幅度(例如，高幅度“A_H”或低幅度 “A_L”)和形状(例如，正方形或锯齿形)。这些乐谱和波形图通常 不是所显示的用户界面的一部分，但是被提供以帮助解释所述图。

图17A示出显示一个或多个用户界面对象的示例性用户界面 11408，例如，用户界面11408显示媒体播放器窗口11402，其包括一 首音乐(例如，音乐专辑的一张封面的图形表示11406-1、11406-2和 11406-3)的表示和光标11404(例如，焦点选择器的显示表示)。在 图17A中，用户界面11408显示在电子设备的显示器450上，该电子 设备还包括触敏表面451以及一个或多个传感器，所述传感器用于检测 与触敏表面的接触的强度。在一些实施例中，触敏表面451是触摸屏显 示器，其任选地是显示器450或独立显示器。

在一些实施例中，设备是具有独立显示器(例如，显示器450)和 独立触敏表面(例如，触敏表面451)的电子设备。在一些实施例中， 设备是便携式多功能设备100，显示器是触敏显示器系统112，并且触 敏表面包括显示器上的触觉输出发生器167(图1A)。为了便于解 释，参考图17A-17O和图18A-18B描述的实施例将参考显示器450和 独立触敏表面451来讨论，然而，类似的操作在具有触敏显示器系统 112的设备上响应于当在触敏显示器系统112上显示图17A-17O所示的 用户界面时检测到图17A-17O所述的接触在触敏显示器系统112上的 移动而任选地执行；在此类实施例中，代替光标11404，焦点选择器任 选地为：相应接触、对应于接触的代表点(例如，相应接触的质心或与 相应接触相关联的点)，或在触敏显示器系统112上检测到的两个或更 多个接触的质心。

图17A-17G示出各种实施例，其中用户界面11408在显示器450 上显示一首音乐的表示11406。用户界面11408还显示光标11404，其 由触敏表面451上的接触11410及其移动11412控制。在一些实施例 中，光标11404在一首音乐的表示11406上方移动，并且作为响应，触 觉发生器167提供与该首音乐中的节拍(例如，节拍11418)的至少一 个子组对应的触觉反馈(例如，触觉输出11414)。在一些实施例中， 在已经提供触觉反馈之后，光标11404远离一首音乐的表示11406移 动，并且作为响应，触觉发生器167停止提供对应于该首音乐中的节拍 的触觉反馈。

图17A-17G示出在触敏表面451上检测到接触11410，其对应于显 示器450上显示的光标11404，和包括接触11410的移动11412(例 如，接触11410从图17A中的位置11410-a到图17B-17F中的位置 11410-b的移动11412-a和/或接触11410从图17B-17F中的位置11410- b到图17G中的位置11410-c的移动11412-b)的手势。在触敏表面451 上的与显示器450上由焦点选择器11404占用的区域对应的位置处检测 到接触11410(例如，接触11410对应于显示器上的焦点选择器，诸如 在用户界面对象11402的位置处或附近的光标11404)。在一些实施例 中，接触11410在触敏表面451上的移动对应于显示器450上的焦点选 择器(例如，光标11404)的移动(例如，如图17A-17G所示)。

图17A-17F示出手势的开始的各种示例，其中光标11404根据接 触11410在触敏表面451上的移动11412-a而在一首音乐的表示11406 上方移动，该接触11410对应于显示器450上的光标11404。在图17B- 17F中，在焦点选择器11404保持在一首音乐的表示11406上方时，设 备生成触觉输出11414(例如，经由触觉输出发生器167)，其对应于 该首音乐的一个节拍的子组(例如，图17C-17F所示的节拍11418)。

在一些实施例中，如图17A-17G所示，该首音乐正在媒体播放器 应用程序(例如，被示出为媒体播放器应用程序窗口11402)中播放。 在一些实施例中，如图17A-17G所示，该首音乐的表示为该首音乐的 图形表示(例如，对应于该首音乐的专辑的封面的图像11406)。

图17C-17F示出各种实施例，其中在媒体播放器应用程序窗口 11402中显示该首音乐的表示11406，并且在由媒体播放器应用程序播 放节拍的子组(例如，该首音乐11416中的所有节拍的子组)中的对应 节拍(例如，图17C-17F中的节拍11418-1、11418-3、11418-5和 11418-7)时生成触觉反馈(例如，图17C-17F中的触觉输出11414-1、 11414-3、11414-5和11414-7)。图17C-17F另外示出各种实施例，其 中节拍的子组(例如，对应于向用户提供的触觉反馈的那些节拍)包括 每隔一个节拍的重音节拍，所述重音节拍包括该首音乐的第一节拍(例 如，节拍11418-1)、第三节拍(例如，节拍11418-3)、第五节拍 (例如，节拍11418-5)和第七节拍(例如，节拍11418-7)。

图17C示出一个实施例，其中节拍的子组不包括非重音节拍，所 述非重音节拍包括该首音乐(例如，该首音乐11416)的第二节拍(例 如，节拍11418-2)、第四节拍(例如，节拍11418-4)、第六节拍 (例如，节拍11418-6)和第八节拍(例如，节拍11418-8)节拍。相 反，下文描述的图17D-17F示出节拍的子组包括该首音乐的重音节拍 (例如，每个奇数节拍11418)和非重音节拍(例如，每个偶数节拍 11418)两者的各种实施例。图17D示出一个实施例，其中触觉输出 11414是基本上相同的，而不管其是对应于重音节拍还是非重音节拍。 相反，下文描述的图17E-17F示出各种实施例，其中对应于重音节拍 (例如，奇数节拍11418)的第一触觉输出11414基本上不同于对应于 非重音节拍(例如，偶数节拍11418)的第二触觉输出11414。

例如，图17E示出一个实施例，其中对应于重音节拍11418的第 一触觉输出11414具有与对应于该首音乐的非重音节拍11418的第二触 觉输出11414相同或基本上相同的幅度(例如，高幅度“A_H”)但基 本上不同的移动轮廓(例如，正方形波形形状11436，相对于锯齿形波 形形状11434)。相反，图17F示出一个实施例，其中对应于重音节拍 11418的第一触觉输出11414具有与对应于该首音乐的非重音节拍 11418的第二触觉输出11414基本上不同的幅度(例如，高幅度 “A_H”，相对于低幅度“A_L”)但基本上相同的移动轮廓(例如，正 方形波形形状11434)。

图17B-17G示出各种实施例，其中在提供触觉反馈之后，如图 17B-17F所示，设备检测接触11410在触敏表面451上的移动11412- b，所述移动11412-b对应于光标11404远离该首音乐的表示11406的 移动。如图17G所示，响应于光标11404远离该首音乐的表示11406 的移动，触觉发生器167停止提供对应于该首音乐的节拍的触觉输出 11414。

图17H-17L示出各种实施例，其中用户界面11408在显示器450 上显示音乐合成应用程序窗口11422，所述音乐合成应用程序窗口 11422包括乐谱的表示11424。用户界面11408还显示光标11404，其 由触敏表面451上的接触11426及其移动11428控制。在一些实施例 中，光标11404在乐谱的表示11424上方移动，并且作为响应，触觉发 生器167提供与该首音乐中的节拍(例如，节拍11418)的至少一个子 组对应的触觉反馈(例如，触觉输出11414)。在一些实施例中，在已 经提供触觉反馈之后，光标11404远离乐谱的表示11424移动，并且作 为响应，触觉发生器167停止提供对应于该首音乐中的节拍的触觉反 馈。

在一些实施例中，如图17I-17J所示，在该首音乐(例如，乐曲) 正由合成应用程序回放时，根据触敏表面451上的接触11426的移动 11428-a，光标11404在乐谱的表示11424上方的移动导致在媒体应用 程序播放节拍时生成对应于该首音乐的节拍11418的触觉输出11414。 虽然图17J示出对应于重音节拍11418的第一触觉输出11414(例如， 分别是奇数编号的触觉输出11414和节拍11418)和对应于非重音节拍 11418的第二触觉输出11414(例如，分别是偶数编号的触觉输出 11414和节拍11418)感觉起来基本上不同(例如，具有基本上不同的 幅度，但相同或基本上相同的正方形波形移动轮廓)，但在一些实施例 中，第一触觉输出和第二触觉输出生成具有基本上相同的幅度和移动轮 廓，并且因此用户将感觉起来基本上相同。在一些实施例中，不包括 (例如，设备未生成)对应于非重音节拍的第二触觉输出。

在一些实施例中，如图17K-17L所示，根据触敏表面451上的接 触11426的移动11428-c，光标11404在乐谱11424中的对应节拍 11418-3的表示11430-3上方的移动导致生成触觉反馈(例如，触觉输 出11414-3)。例如，图17K示出一个实施例，其中根据接触11426在 触敏表面451上从位置11426-1到位置11426-3的移动11428-b，光标 11404在显示器450上在乐谱的表示11424上方移动，并且不生成触觉 反馈，因为光标显示处于不对应于该首音乐中的节拍的表示的位置处。 相反，如图17L所示，根据接触11426在触敏表面451上从位置 11426-3到位置11426-d的移动11428-c，光标11404在乐谱的表示 11424中的节拍11418-3的表示11430-3上方移动，并且在触敏表面 451上生成触觉反馈(例如，触觉输出11414-3)，而不管对应于该首 音乐的乐谱的表示11424的音乐是否同时正由音乐合成应用程序播放。

图17M-17O示出用于生成这些触觉输出的移动轮廓的示例性波 形。图17M示出锯齿形波形11434。图17N示出正方形波形11436， 并且图17O示出具有低于图17F的正方形波形的幅度的正方形波形 11438。锯齿形波形11434具有与正方形波形11436和11438不同的移 动轮廓以及与正方形波形11436基本上相同的幅度。正方形波形11436 具有与正方形波形11438基本上相同的移动轮廓和基本上不同的幅度。

图18A-18B是示出根据一些实施例的提供与一首音乐的节拍对应 的反馈的方法11500的流程图。方法11500在具有显示器和触敏表面的 电子设备(例如，图3的设备300或图1A的便携式多功能设备100) 处执行。在一些实施例中，显示器是触摸屏显示器，并且触敏表面在显 示器上。在一些实施例中，显示器与触敏表面是分开的。方法11500中 的一些操作任选地被组合，和/或一些操作的顺序被任选地改变。

如下所述，方法11500提供用于提供与一首音乐的节拍对应的反馈 的直观方式。该方法减小当检测与一首音乐的节拍对应的反馈时用户的 认知负担，从而创建更有效的人机界面。对于电池驱动的电子设备，使 用户能够更快且更有效地检测与一首音乐的节拍对应的反馈节省功率并 且增加电池充电之间的时间。

在一些实施例中，设备在显示器(例如，图17A-17L中的显示器 450)上显示(11502)一首音乐的表示(例如，图17A-17G中的对应于一 首音乐的一张封面的表示11406或图17H-17L中的对应于一首音乐的 乐谱的表示11424)。在一些实施例中，该首音乐(例如，图17C-17F 和图17J中的音乐11416)在媒体播放器应用程序(例如，图17A-17G 中的媒体播放器应用程序窗口11402)中播放(11504)，并且该首音乐的 表示为该首音乐的图形表示(例如，图17A-17G中的该首音乐的专辑 的一张封面的表示11406)。在一些实施例中，该首音乐的表示为该首 音乐的专辑的一张封面(例如，表示11406)。在一些实施例中，该首 音乐的表示为媒体播放器应用程序的“正在播放”区域(例如，媒体播 放器应用程序窗口11402的区域11420)，其包括该首音乐的名称和播 放时间。

在一些实施例中，在设备显示一首音乐的表示时，设备检测(11506) 焦点选择器(例如，图17A-17L中的光标11404)在该首音乐的表示上 方的移动。

在一些实施例中，当在该首音乐的表示上方检测到焦点选择器 时，设备提供(11508)与该首音乐(例如，图17C-17F和图17J中的该 首音乐11416)的节拍(例如，图17C-17F和图17J中的节拍11418) 的至少一个子组对应的触觉反馈(例如，图17B-17F、图17I-17J和图 17L中的触觉输出11414)。在一些实施例中，该首音乐的表示是音符 的表示(例如，乐谱)。在一些实施例中，该首音乐的表示包括对应于 该首音乐的视觉媒体(例如，图像、视频、对该首音乐的文字描述或包 括该首音乐的专辑/视频，或与该首音乐相关联的音频可视器)。例 如，对应于一首音乐的触觉反馈在焦点选择器(例如，显示光标或接 触)位于该首音乐的专辑封面上方、位于该首音乐的作曲者或艺术家图 像上方或位于包括该首音乐作为当前播放音频内容(例如，电影中的背 景音乐或音乐视频中的音乐)的当前播放视频上方时生成。

在一些实施例中，在提供触觉反馈之后，设备检测(11528)焦点选 择器远离该首音乐的表示的移动(例如，光标11404的移动，其对应于 图17G中的触敏表面451上的接触11410-c的移动11412-b)。

在一些实施例中，响应于检测到焦点选择器远离该首音乐的表示 的移动，设备停止(11530)提供对应于该首音乐的节拍的触觉反馈(例 如，触觉输出11414)。

在一些实施例中，根据触敏表面(例如，触敏表面451)上的接触 (例如，图17A-17G中的接触11410或图17H-17L中的接触11426) 的移动(例如，图17A-17G中的移动11412或图17H-17L中的移动 11428)来移动(11510)焦点选择器(例如，图17A-17L中的光标 11404)，并且通过在触敏表面上生成触觉输出(例如，图17B-17F、 图17I-17J和图17L中的触觉输出11414)来提供触觉反馈。在一些实 施例中，接触是焦点选择器(例如，在设备具有触摸屏时，焦点选择器 任选地是接触11410)。在一些实施例中，接触对应于在显示器上显示 的光标或选择框。

在一些实施例中，在媒体播放器应用程序(例如，图17A-17G中 的媒体播放器应用程序窗口11402)中显示(11512)该首音乐的表示(例 如，图17A-17G中的该首音乐的专辑的一张封面的表示11406)，并且 触觉反馈包括当节拍的子组中的对应节拍(例如，节拍11418)由媒体 播放器应用程序播放时生成的多个触觉输出(例如，触觉输出11414) (例如，在媒体播放器应用程序中正在播放音乐时，触敏表面生成触觉 输出)。

在一些实施例中，该首音乐的表示在音乐合成应用程序(例如， 图17H-17L中的音乐合成应用程序窗口11422)中显示(11514)为乐谱 (例如，图17H-17L中的该首音乐的乐谱的表示11424)。例如，通过 以对应于该首音乐的乐谱的表示(例如，乐谱的表示11424)显示该首 音乐(例如，音乐11416)的音符的表示(例如，图17H-17L中的黑条 11430-9，其对应于按该首音乐11416的节拍11418-9播放的音符)。

在一些实施例中，当该首音乐的表示在音乐合成应用程序中显示 为乐谱时，触觉反馈包括(11516)当焦点选择器在乐谱的节拍子组中的 对应节拍(例如，在图17L中表示为垂直线11432-3或节拍表示11430- 3的节拍11418-3)的表示上方移动时生成的多个触觉输出(例如，触 觉输出11414)。在一些实施例中，焦点选择器根据接触在触敏表面上 的移动(例如，在图17K-17L中，接触11426在触敏表面451上的移 动11428-c)而移动，并且因此根据接触在触敏表面上的移动而生成触 觉输出(例如，触觉输出11414)。

在一些实施例中，节拍的子组(例如，节拍11418)包括(11518)该 首音乐中的重音节拍(例如，图17C-17F和图17J中该首音乐11416中 的偶数编号的节拍11418)。在一些实施例中，节拍是音乐的基本时间 单位(例如，一首音乐中的四分音符具有4/4拍号，或一首音乐中的八 分音符具有6/8拍号)，其中重音节拍是多个节拍中的更强、更响或以 其他方式更着重的节拍。一些典型的节拍模式包括每隔四个节拍加重 (例如，如具有4/8拍号的音乐中通常进行的)、每隔一个节拍加重 (例如，如具有4/4拍号的音乐中通常进行的)或每隔三个节拍加重 (例如，如具有3/4或6/8拍号的音乐(诸如华尔兹)中通常进行 的)。未加重的节拍有时称为非重音节拍。在一些实施例中，节拍是音 乐中的基本时间单位的子单位(例如，具有4/4或3/4拍号的音乐中的 八分音符)。

在一些实施例中，节拍的子组不包括(11520)该首音乐的非重音节 拍。例如，如图17C所示，节拍11418的子组包括重音节拍(例如， 奇数编号的节拍11418)但不包括非重音节拍(例如，偶数编号的节拍 11418)，并且仅生成对应于重音节拍的触觉输出11414。

在一些实施例中，在当该首音乐的表示上方检测到焦点选择器时 提供(11508)与该首音乐的节拍的至少一个子组对应的触觉反馈的情况 下，节拍的子组包括(11522)一个或多个重音节拍(例如，奇数编号的 节拍11418)和一个或多个非重音节拍(例如，偶数编号的节拍 11418)，触觉反馈包括针对节拍的子组中的对应节拍的多个触觉输出 (例如，触觉输出11414)，针对重音节拍生成第一触觉输出，并且针 对非重音节拍生成不同于第一触觉输出的第二触觉输出(例如，偶数编 号的触觉输出11414和奇数编号的触觉输出11414使用户感觉起来基本 上不同，如图17E-17F和图17J所示)。相反，在一些实施例中，对应 于重音节拍的第一触觉输出和对应于非重音节拍的第二触觉输出是基本 上相同的(例如，对应于奇数编号的重音节拍11418的奇数编号的触觉 输出11414和对应于偶数编号的非重音节拍11418的偶数编号的触觉输 出11414使用户感觉起来基本上相同，如图17D所示)。在一些实施 例中，第一触觉输出比第二触觉输出更突出(例如，具有较大幅度)。 在一些实施例中，第二触觉输出比第一触觉输出更突出(例如，具有较 大幅度)。

在一些实施例中，第一触觉输出由触敏表面的包括第一主要移动 分量的移动来生成(11524)，第二触觉输出由触敏表面的包括第二主要 移动分量的移动来生成，并且第一主要移动分量和第二主要移动分量具 有相同或基本上相同的幅度(例如，图17E中所有触觉输出11414的 高幅度“A_H”)和基本上不同的移动轮廓(例如，图17E中奇数编号 的触觉输出11414的正方形波形形状11436和偶数编号的触觉输出 11414的锯齿形波形形状11434)。在一些实施例中，触敏表面的移动 与忽略任何非预期谐振的初始脉冲对应。在一些实施例中，移动轮廓在 其波形形状(例如，正方形、正弦形、squine、三角形或锯齿形波形形 状)、波形脉冲宽度和/或波形脉冲周期(例如，频率)方面有所不 同。例如，如图17E所示，在触敏表面上生成的对应于音乐的重音节 拍的“卡位”具有正方形波形移动轮廓(例如，图17E中奇数编号的 触觉输出11414的正方形波形11436)，而在触敏表面上生成的对应于 音乐的非重音节拍的“点击”具有锯齿形波形移动轮廓(例如，图17E 中偶数编号的触觉输出11414的锯齿形波形11434)，反之亦然。

在一些实施例中，第一触觉输出由触敏表面的包括第一主要移动 分量的(11526)，第二触觉输出由触敏表面的包括第二主要移动分量的 移动来生成，并且第一主要移动分量和第二主要移动分量具有相同或基 本上相同的移动生成动轮廓(例如，图17F和图17J中奇数编号的触觉 输出11414的正方形波形11434和偶数编号的触觉输出11414的正方形 波形11436)和基本上不同的幅度(例如，图17F和图17J中奇数编号 的触觉输出11414的高幅度“A_H”大于偶数编号的触觉输出11414的 低幅度“A_L”)。在一些实施例中，触敏表面的移动与忽略任何非预 期谐振的初始脉冲对应。在一些实施例中，移动轮廓在其波形形状(例 如，正方形、正弦形、squine、三角形或锯齿形波形形状)、波形脉冲 宽度和/或波形脉冲周期(例如，频率)方面有所不同。例如，如图 17F和图17J所示，在触敏表面上生成的对应于音乐的重音节拍的“卡 位”具有大于在触敏表面上生成的对应于音乐的非重音节拍的“卡位” 的幅度(例如，图17F和图17J中奇数编号的触觉输出11414的高幅度 “A_H”大于图17F和图17J中偶数编号的触觉输出11414的低幅度 “A_L”)，反之亦然。

在一些实施例中，在提供触觉反馈之后，设备检测(11528)焦点选 择器远离该首音乐的表示的移动。例如，如图17G所示，根据检测接 触11410在触敏表面451上从位置11410-b到位置11410-c的移动 11412-b，其对应于光标11404远离一首音乐的表示11406的移动。在 一些实施例中，响应于检测到焦点选择器远离该首音乐的表示的移动， 设备停止(11530)提供对应于该首音乐的节拍的触觉反馈。例如，如图 17G所示，在光标11404远离一首音乐的表示11406移动时，触觉输出 发生器167停止在触敏表面451上生成触觉输出11414，因为光标不再 定位在该首音乐的表示上方。

应当理解，对图18A-18B中已经进行描述的操作的特定顺序仅仅 是示例性的，并非意图表明所述顺序是可以执行这些操作的唯一顺序。 本领域的普通技术人员会想到各种方式来对本文所述的操作进行重新排 序。另外，应当指出的是，本文中相对于本文描述的其他方法(例如， 段落[0058]中列出的那些方法)所描述的其他过程的细节也以类似的方 式适用于上文相对于图18A-18B描述的方法11500。例如，上文参考方 法11500描述的接触、手势、用户界面对象、触感和焦点选择器任选地 具有本文中参考本文描述的其他方法(例如，段落[0058]中列出的那些 方法)描述的接触、手势、用户界面对象、触感和焦点选择器的一个或 多个特性。为简明起见，这里不重复这些细节。

根据一些实施例，图19示出根据各种所描述的实施例的原理配置 的电子设备11600的功能框图。该设备的功能块任选地由进行各种所描 述的实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域 的技术人员应当理解，图19中所述的功能块任选地被组合或被分离为 子块以实现各种所描述的实施例的原理。因此，本文的描述任选地支持 本文所述功能块的任何可能的组合或分离或进一步限定。

如图19所示，电子设备11600包括：显示单元11602，其被配置 为显示一个或多个用户界面对象；触敏表面单元11604，其被配置为接 收用户接触；任选地一个或多个传感器单元11606，其被配置为检测与 触敏表面单元11604的接触的强度；以及处理单元11608，其耦接到显 示单元11602、触敏表面单元11604以及任选地一个或多个传感器单元 11606。在一些实施例中，处理单元11608包括显示使能单元11610、 检测单元11612、提供单元11614和停止单元11616。

在一些实施例中，处理单元11608被配置为在显示单元11602上使 能一首音乐的表示的显示(例如，使用显示使能单元11610)。在一些 实施例中，处理单元11608被配置为检测焦点选择器在该首音乐的表示 上方的移动(例如，使用检测单元11612)；并且当在该首音乐的表示 上方检测到焦点选择器时，处理单元11608被配置为提供与该首音乐的 节拍的至少一个子组对应的触觉反馈(例如，使用提供单元11614)。 在一些实施例中，在提供触觉反馈之后，处理单元11608被配置为检测 焦点选择器远离该首音乐的表示的移动(例如，使用检测单元 11612)；并且响应于检测到焦点选择器远离该首音乐的表示的移动， 处理单元11608被配置为停止提供与该首音乐的节拍对应的触觉反馈 (例如，使用停止单元11616)。

在一些实施例中，处理单元11608被配置为根据接触在触敏表面单 元11604上的移动而使能焦点选择器的移动的显示(例如，使用显示使 能单元11610)，并且通过在触敏表面单元11604上生成触觉输出来提 供触觉反馈(例如，使用提供单元11614)。

在一些实施例中，该首音乐当前正在媒体播放器应用程序中播 放；并且该首音乐的表示是该首音乐的图形表示。

在一些实施例中，处理单元11608被配置为在媒体播放器应用程序 中显示该首音乐的表示(例如，使用显示使能单元11610)，并且触觉 反馈包括当节拍的子组中的对应节拍由媒体播放器应用程序播放时生成 的多个触觉输出。

在一些实施例中，处理单元11608被配置为在音乐合成应用程序中 将该首音乐的表示显示为乐谱(例如，使用显示使能单元11610)。

在一些实施例中，触觉反馈包括当焦点选择器在乐谱的节拍的子 组中的对应节拍的表示上方移动时生成的多个触觉输出。

在一些实施例中，节拍的子组包括该首音乐的重音节拍。

在一些实施例中，节拍的子组不包括该首音乐的非重音节拍。

在一些实施例中，节拍的子组包括一个或多个重音节拍和一个或 多个非重音节拍，触觉反馈包括针对节拍的子组中的对应节拍的多个触 觉输出，处理单元11608被配置为针对重音节拍生成第一触觉输出(例 如，使用提供单元11614)，并且处理单元11608被配置为针对非重音 节拍生成不同于第一触觉输出的第二触觉输出(例如，使用提供单元 11614)。

在一些实施例中，第一触觉输出由触敏表面单元11604的包括第一 主要移动分量的移动来生成，第二触觉输出由触敏表面单元11604的包 括第二主要移动分量的移动来生成，并且第一主要移动分量和第二主要 移动分量具有相同的幅度和不同的移动轮廓。

在一些实施例中，第一触觉输出由触敏表面单元11604的包括第一 主要移动分量的移动来生成，第二触觉输出由触敏表面单元11604的包 括第二主要移动分量的移动来生成，并且第一主要移动分量和第二主要 移动分量具有相同的幅度和不同的移动轮廓。

上述信息处理方法中的操作任选地通过运行信息处理装置中的一 个或多个功能模块来实现，该信息处理装置诸如为通用处理器(例如， 如以上相对于图1A和图3所描述)或特定于应用的芯片。

以上参考图18A-18B所述的操作任选地由图1A-1B或图19中所描 绘的部件来实现。例如，检测操作11506和11528以及提供操作11508 任选地由事件分类器170、事件识别器180和事件处理程序190来实 现。事件分类器170中的事件监视器171检测触敏显示器112上的接 触，并且事件分配器模块174将事件信息递送到应用程序136-1。应用 程序136-1的相应事件识别器180将事件信息与相应事件定义186进行 比较，并且确定触敏表面上的第一位置处的第一接触是否对应于预定义 的事件或子事件，诸如用户界面上的对象的选择或焦点选择器在用户界 面上在一首音乐的表示上方的显示。当检测到相应的预定义的事件或子 事件时，事件识别器180激活与检测到该事件或子事件相关联的事件处 理程序190。事件处理程序190任选地使用或调用数据更新器176或对 象更新器177来更新应用程序内部状态192。在一些实施例中，事件处 理程序190访问相应GUI更新器178来更新应用程序显示的内容。在 一些实施例中，事件处理程序190访问相应的触觉输出发生器167以生 成触觉输出。类似地，本领域技术人员会清楚地知道基于在图1A-1B 中所示的部件可如何实现其他过程。

应当理解，其中上文已描述的操作的特定顺序仅仅是示例性的， 并非意图表明所述顺序是可以执行这些操作的唯一顺序。本领域的普通 技术人员会想到各种方式来对本文所述的操作进行重新排序。另外，应 当指出的是，本文独立描述的各种过程(例如，段落[0058]中列出的那 些过程)可以不同的布置方式彼此组合。例如，上文参考本文独立描述 的各种过程(例如，段落[0058]中列出的那些过程)中的任一者所描述 的接触、用户界面对象、触感、强度阈值、和/或焦点选择器任选地具 有本文参考本文所述的其他方法(例如，段落[0058]中列出的那些方 法)中的一种或多种所描述的接触、手势、用户界面对象、触感、强度 阈值、和焦点选择器的特性中的一个或多个。为简明起见，这里不具体 枚举所有各种可能的组合，但应当理解，上文所述的权利要求可以互相 排斥的权利要求特征所不排除的任何方式来组合。

为了解释的目的，前面的描述是通过参考具体实施例来进行描述 的。然而，上述例示性的讨论并非旨在是穷尽的或将各种所描述的实施 例局限于本发明所公开的精确形式。根据以上教导内容，很多修改形式 和变型形式都是可能的。选择和描述实施例是为了最佳阐释各种所描述 的实施例的原理及其实际应用，从而使本领域的其他技术人员能够最佳 地使用具有适合于所构想的特定用途的各种修改的各种所描述的实施 例。