用户终端及其控制方法与流程

本公开涉及用户终端及其控制方法，以及更具体地，涉及这样的用户终端及其控制方法，该用户终端播放与由外部显示装置播放的图像内容同步的图像内容。

背景技术：

随着电子技术的发展已开发多种类型的显示装置。具体地，诸如TV、PC、膝上型计算机、平板PC、手机、MP3播放器等的显示装置因为用于大多数家庭而具有如此高的供应率。

近来，为了满足想要具有更新且多样化的功能的用户的需要，已致力于通过显示装置来提供各种服务和功能。例如，提供了这样的功能，其通过用户终端来同时提供由显示装置当前显示的图像内容。

然而，目前的用户终端仅与显示装置同步由显示装置显示的图像内容并且播放同步的图像内容，但是具有这样的局限性：其不提供与图像内容有关的各种服务。

技术实现要素：

本公开提供用户终端及其控制方法，其中，用户终端能够提供用户接口(UI)，该用户接口(UI)提供针对从外部显示装置接收的图像内容的多种功能和服务。

根据本公开的一方面，用户终端的控制方法包括：显示一个图像内容的多个相关图像；当检测到预设用户交互时，显示用于选择多个相关图像的播放时间点的第一用户接口(UI)；以及当检测到通过第一UI选择特定时间点的用户交互时，从该特定时间点开始播放多个相关图像。

控制方法还可包括：从外部显示装置接收多个相关图像的图像流，其中，当显示多个相关图像时，可处理图像流以同时显示多个相关图像。

在显示多个相关图像时，可使用包括在图像流中的时间戳信息来显示与由显示装置显示的图像内容同步的多个相关图像。

控制方法还可包括：存储从显示装置接收到的图像流，其中，当播放多个相关图像时，可使用所存储的图像流从特定时间点开始播放多个相关图像。

播放多个相关图像可包括：将与特定时间点有关的信息传输至外部服务器；从外部服务器接收从特定时间点开始的多个相关图像的图像流；以及从特定时间点开始播放所接收的多个相关图像。

控制方法还可包括：当检测到针对多个相关图像中的一个相关图像的预设用户交互时，显示用于选择一个相关图像的播放时间点的第二UI；以及当检测到通过第二UI选择特定时间点的用户交互时，仅播放从特定时间点开始的一个相关图像。

控制方法还可包括：在从特定时间点开始播放一个相关图像的情况下当检测到针对一个相关图像的预设用户交互时，将一个相关图像扩展成在整个屏幕上显示。

所述第一UI可以是进度条形式的UI。

根据本公开的另一方面，用户终端包括：显示器，配置为显示一个图像内容的多个相关图像；传感器，配置为检测用户交互；以及控制器，配置为控制显示器，从而在通过传感器检测到预设用户交互时，显示用于选择多个相关图像的播放时间点的第一用户接口(UI)，以及当检测到通过第一UI选择特定时间点的用户交互时，从该特定时间点开始播放多个相关图像。

用户终端还可包括：通信器，配置为从外部显示装置接收多个相关图像的图像流；以及图像处理器，配置为处理所接收的图像流，其中，控制器可控制显示器来同时显示由图像处理器处理的多个相关图像。

控制器可控制显示器来使用包括在图像流中的时间戳信息显示与由显示装置显示的图像内容同步的多个相关图像。

用户终端还可包括：存储器，配置为存储从显示装置接收的图像流，其中，控制器可使用存储在存储器中的图像流从特定时间点开始播放多个相关图像。

用户终端还可包括：通信器，配置为执行与外部服务器的通信，其中，控制器可控制通信器来将与特定时间点有关的信息传输至外部服务器并且从外部服务器接收从特定时间点开始的多个相关图像的图像流，以及从该特定时间点开始播放所接收的多个相关图像。

控制器可控制显示器，从而当通过传感器检测到针对多个相关图像中的一个相关图像的预设用户交互时，显示用于选择一个相关图像的播放时间点的第二UI，以及当检测到通过第二UI选择特定时间点的用户交互时，仅播放从特定时间点开始的一个相关图像。

控制器可控制显示器，从而在从特定时间点开始播放一个相关图像的情况下当通过传感器检测到针对一个相关图像的预设用户交互时，将一个相关图像扩展成在整个屏幕上显示。

第一UI可以是进度条形式的UI。

根据本公开的另一方面，用户终端的控制方法包括：显示图像内容；当检测到预设用户交互时，显示用于选择图像内容的特定区段的用户接口(UI)；当检测到通过UI选择特定区段的用户交互时，显示提供针对特定区段的多个服务的列表；以及当检测到选择包括在列表中的多个服务中的一个服务的用户交互时，提供为特定区段而选择的服务。

列表可包括提供预览服务的预览图标、提供存储服务的存储图标、提供共享服务的共享图标和提供编辑服务的编辑图标中的至少一个。

在提供服务时，当检测到选择预览图标的用户交互时，可在显示屏的一个区域上播放特定区段的图像内容。

在提供服务时，当检测到选择存储图标的用户交互时，可存储特定区段的图像内容。

在提供服务时，当检测到选择共享图标的用户交互时，可将特定区段的图像内容上传至外部服务器。

用于选择特定区段的UI可以是映射到图像内容的播放时间的进度条形式的UI，并且控制方法还可包括：当检测到选择进度条形式的UI中的特定时间点的用户交互时，在特定时间点的上部处显示特定时间点的缩略画面。

图像内容可从外部显示装置接收，以及在显示图像内容时，可使用图像内容的时间戳信息来显示与由显示装置播放的图像内容同步的图像内容。

根据本公开的另一方面，用户终端包括：显示器，配置为显示图像内容；传感器，配置为检测用户交互；以及控制器，配置为控制显示器，从而在通过传感器检测到预设用户交互时，显示用于选择图像内容的特定区段的用户接口(UI)，控制器还配置为控制显示器，从而在检测到通过UI选择特定区段的用户交互时显示提供针对特定区段的多个服务的列表以及在检测到选择包括在列表中的多个服务中的一个服务的用户交互时，提供为特定区段选择的服务。

列表可包括提供预览服务的预览图标、提供存储服务的存储图标、提供共享服务的共享图标和提供编辑服务的编辑图标中的至少一个。

控制器可控制显示器，从而当检测到选择包括在列表中多个图标中的预览图标的用户交互时，在显示屏的一个区域上播放特定区段的图像内容。

用户终端还可包括存储器，其中，当检测到选择包括在列表中的多个图标中的存储图标的用户交互时，控制器可将特定区段的图像内容存储在存储器中。

用户终端还可包括通信器，通信器配置为执行与外部服务器的通信，其中，控制器可控制通信器，从而在检测到选择包括在列表中的多个图标中的共享图标的用户交互时，将特定区段的图像内容上传至外部服务器。

用于选择特定区段的UI可以是映射到图像内容的播放时间的进度条形式的UI，以及控制器可控制显示器，从而在检测到选择进度条形式的UI中的特定时间点的用户交互时，在特定时间点的上部处显示特定时间点的缩略画面。

图像内容可从外部显示装置接收，以及控制器可控制显示器来使用图像内容的时间戳信息来显示与由显示装置播放的图像内容同步的图像内容。

有益效果

根据本公开多种示例性实施方式，用户可通过用户终端接收针对由外部显示装置显示的图像内容的多种服务和功能。

附图说明

图1是示出了根据本公开示例性实施方式的多媒体系统的图示；

图2是示意性地示出了根据本公开示例性实施方式的用户终端的配置的框图；

图3是详细地示出了根据本公开示例性实施方式的用户终端的配置的框图；

图4A和图4B以及图5A至图5C是示出了根据本公开示例性实施方式用于将显示装置与用户终端配对的方法的图示；

图6A至图6C是示出了根据本公开示例性实施方式用于实施网络拓扑的方法的图示；

图7A和图7B是示出了根据本公开另一示例性实施方式用于实施网络拓扑的方法的图示；

图8是示出了根据本公开示例性实施方式的存储器的配置的框图；

图9A至图10C是示出了根据本公开多种示例性实施方式使用用于选择播放时间点的UI来选择多个相关图像中的至少一个相关图像的播放时间点的示例的图示；

图11A至图11G是示出了根据本公开示例性实施方式提供针对由用户在图像内容之中选择的区段的多种功能的示例的图示；

图12A至图12D是示出了根据本公开示例性实施方式提供PIP类型的预订提醒功能的示例的图示；以及

图13至图15是示出了根据本公开多种示例性实施方式用于用户终端的控制方法的流程图。

具体实施方式

本公开的示例性实施方式可进行不同地修改。相应地，具体示例性实施方式在附图中示出，以及在详细说明中被详细地描述。然而，应理解的是，本公开不限于具体示例性实施方式，而是在不背离本公开的范围和精神的情况下包括全部的修改、等同和替换。在描述示例性实施方式时，当确定已知技术的具体描述会使本公开的主旨不清楚时，将省略该已知技术的详细描述。

措辞“第一”、“第二”等可用于描述各种部件，但是这些部件不应受这些措辞限制。这些措辞仅用于将一个部件与其它部件区分开。

本申请中使用的措辞仅用于描述示例性实施方式，而不旨在限制本公开的范围。除非另外明确地指出，否则本文中使用的单数形式旨在包括复数形式。在本申请中，措辞“包括”或“包含”旨在指定写入本说明书中的特征、数字、步骤、操作、部件、元件或其组合的存在，但是不排除一个或多个其它特征、数字、步骤、操作、部件、元件或其组合的存在或添加的可能性。

在本公开示例性实施方式中，“模块”或“单元”执行至少一个功能或操作，并且可以用硬件、软件或者硬件和软件的组合实现。另外，除必须在专门的硬件中实现的“模块”或“单元”外的多个“模块”或多个“单元”可整合到至少一个模块中，以及可在至少一个处理器(未示出)中实施。

在下文中，将参照附图详细描述本公开的多种示例性实施方式。图1是示出了根据本公开示例性实施方式的多媒体系统10的图示。如图1所示，多媒体系统10包括用户终端100和显示装置200。这里，用户终端100可以是包括用于控制显示装置200的触摸屏的独立远程控制器，但这仅是一个示例。用户终端100可实现为诸如智能电话、平板PC等多种便携式用户终端。另外，显示装置200可以是智能TV，但这仅是一个示例。显示装置200可实现为诸如数字TV、台式PC、笔记本PC、导航、资讯站、数字信息显示器(DID)等多种显示装置。

用户终端100和显示装置200可通过多种通信方案互相连接。例如，用户终端100和显示装置200可使用诸如蓝牙、Wi-Fi等无线通信模块执行两者之间的通信。

具体地，显示装置200显示图像内容。当显示装置200显示图像内容时，显示装置200可将图像内容的一个或多个相关图像传输至用户终端100。这里，图像内容的一个或多个相关图像可以是由显示装置200当前显示的图像内容的图像、通过以多个角度拍摄图像内容而获得的多角度图像以及包括图像内容的相关信息的图像。

用户终端100显示图像内容的一个或多个相关图像。这里，用户终端100可基于图像内容的时间戳信息使由显示装置200显示的图像内容与一个或多个相关图像同步，并且可显示同步的相关图像。当图像内容是通过互联网接收的广播内容时，用户终端100可使用包括在广播内容的元数据中的时间戳信息使由显示装置200显示的图像内容与一个或多个相关图像同步，以及可显示同步的相关图像。

根据本公开示例性实施方式，用户终端100可存储接收到的图像内容的一个或多个相关图像。这里，用户终端100可存储图像内容的一个或多个相关图像中的全部，但这仅是一个示例。用户终端100可在预设段期间使用先进先出(FIFO)方案暂时存储一个或多个相关图像。

当在用户终端100显示一个或多个相关图像的情况下检测到预设用户交互时，用户终端100可显示用于选择一个或多个相关图像的播放时间点的用户接口(UI)(在下文中，称为“时移功能的UI”)。这里，时移功能的UI可以是进度条形式的UI。另外，当检测到通过UI选择特定时间点的用户交互时，用户终端100可从该特定时间点开始播放一个或多个相关图像。

根据本公开示例性实施方式，用户终端100可从特定时间点开始播放包括一个或多个预存储的相关图像的图像流。根据本公开的另一示例性实施方式，用户终端100可将与特定时间点有关的信息传输至外部服务器、从外部服务器接收从特定时间点开始的多个相关图像的图像流，以及显示从特定时间点开始的一个或多个相关图像。

另外，当用户终端100在显示图像内容的情况下检测到预设用户交互时，用户终端100显示用于选择图像内容的特定区段的UI。另外，当检测到通过UI选择特定区段的用户交互时，用户终端100可显示为特定区段提供多个服务的列表。另外，当检测到选择包括在列表中的多个服务中的一个服务的用户交互时，用户终端100提供为特定区段而选择的服务。这里，用于特定区段的多个服务可包括存储特定区段的图像内容的存储服务、预览特定区段的图像内容的预览服务、通过社交网络服务与他人共享特定区段的图像内容的共享服务以及编辑特定区段的图像内容的编辑服务。

另外，当在用户终端100显示图像内容的情况下从显示装置200接收到事件图像内容时，用户终端100在显示屏的一个区域上显示事件图像内容。这里，事件图像内容可以是由用户预订的预订图像内容、推荐图像内容和广告图像内容中的一个。

使用如上所述的多媒体系统10，用户可通过用户终端100执行针对由显示装置200当前显示的图像内容的多种功能和服务。

图2是示意性地示出了根据本公开示例性实施方式的用户终端100的框图。如图2中所示，用户终端100包括显示器110、传感器120和控制器130。

显示器110通过控制器130的控制来显示图像内容。具体地，显示器110可划分显示屏，以及显示图像内容的一个或多个相关图像。这里，图像内容的相关图像可包括由显示装置200当前显示的图像内容的图像、通过以多个角度拍摄图像内容而获得的图像以及包括图像内容的相关信息的图像中的至少一个。

传感器120检测用户的触摸交互。具体地，传感器120可检测诸如捏放交互、拖拽交互等多种触摸交互。同时，传感器120可以与显示器110一起实现为触摸屏。

控制器130可控制用户终端100的总体操作。

根据本公开示例性实施方式，当传感器120在显示器110显示针对一个图像内容的多个相关图像的情况下检测到预设用户交互时，控制器130可控制显示器110来显示用于时移功能的第一UI。另外，当传感器120检测到通过第一UI选择特定时间点的用户交互时，控制器130可从该特定时间点开始播放多个相关图像。

具体地，当从显示装置200接收到针对一个图像内容的多个相关图像的图像流时，控制器130可控制显示器110来处理接收到的图像流以及同时显示多个相关图像。这里，控制器130可控制显示器110来使用包括在图像流中的时间戳信息显示与由显示装置显示的图像内容同步的多个相关图像。

另外，控制器130可存储从显示装置200接收到的图像流。这里，控制器130可存储接收到的图像流的全部，但这仅是一个示例。控制器130可使用FIFO方案的缓存器来存储预设时间内所接收的图像流。

当传感器120在显示器110显示多个相关图像的情况下检测到预设用户交互(例如，触摸触摸屏的一个区域的交互)时，控制器130可控制显示器110来显示针对多个相关图像的时移功能的第一UI。这里，第一UI可以是进度条形式的UI，但这仅是一个示例。第一UI可以是不同形式的UI。

另外，当检测到通过第一UI选择特定时间点的用户交互时，控制器130可从选择的特定时间点开始播放多个相关图像。具体地，当触摸映射到图像内容的播放时间的进度条形式的第一UI的任一点时，控制器130可确定与触摸点对应的播放时间点。另外，控制器130可控制显示器110来使用所存储的图像流从与触摸位置对应的播放时间点开始显示图像内容的多个相关图像。当未存储从显示装置200接收到的图像流时，控制器130可将关于与触摸点对应的播放时间点的信息传输至外部服务器。另外，当从外部服务器接收到从与触摸点对应的播放时间点开始的图像内容的多个相关图像时，控制器130可从接收到的播放时间点开始播放多个相关图像。

另外，当传感器120在多个相关图像被显示的情况下检测到针对多个相关图像之中的第一相关图像而预设的用户交互(例如，以预设时间触摸一个相关图像的交互)时，控制器130可控制显示器110来显示用于提供第一相关图像的时移功能的第二UI。

另外，当传感器120检测到通过第二UI选择特定时间点的用户交互时，控制器130可从特定时间点开始仅播放第一相关图像。这里，控制器130可通过执行向特定时间点的时移而不播放未选择的相关图像，但是可持续保持当前播放状态。

另外，在从特定时间点开始播放第一相关图像时，当检测到针对第一相关图像的预设用户交互(例如，连续触摸显示第一相关图像的图像两次的交互)时，控制器130可控制显示器110来使第一相关图像扩展至整个屏幕进行显示。

因此，用户终端100可向一个图像内容的多个相关图像中的一个或多个相关图像提供时移功能。

同时，虽然上述示例性实施方式示出了时移功能被提供至全部相关图像或一个相关图像，但是，时移功能可仅被提供至多个相关图像中的至少两个相关图像。例如，当检测到针对多个相关图像中的第一相关图像和第二相关图像的预设用户交互(例如，以预设时间触摸第一相关图像与第二相关图像之间的边界线的交互)时，控制器130可控制显示器110来显示为第一相关图像和第二相关图像提供时移功能的UI。

根据本公开的另一示例性实施方式，当传感器120在图像内容被显示的情况下检测到预设用户交互时，控制器130可控制显示器110来显示用于选择图像内容的特定区段的UI。另外，当检测到通过UI选择特定区段的用户交互时，控制器130可控制显示器110来显示提供针对特定区段的多个服务的列表。另外，当检测到选择包括在列表中的多个服务中的一个的用户交互时，控制器130可提供为特定区段而选择的服务。

具体地，当从外部显示装置200接收到针对由显示装置200当前显示的图像内容的图像流时，控制器130可控制显示器110来处理接收到的图像流并且显示图像内容。这里，控制器130可控制显示器110来使用图像内容的时间戳信息显示与由显示装置200播放的图像内容同步的图像内容。

当用户终端100在用户终端100同时显示由显示装置200当前显示的图像内容的情况下检测到预设用户交互时，控制器130可控制显示器110来显示用于选择图像内容的特定区段的UI。这里，用于选择图像内容的特定区段的UI可以是映射到图像内容的播放时间的进度条形式的UI。

另外，控制器130可根据通过UI的用户交互输入来选择图像内容的特定区段。这里，当检测到用于选择进度条形式的UI的特定点的用户交互时，控制器130可控制显示器110来在特定点的上部上显示缩略画面，其中，该缩略画面显示在与特定点对应的播放时间处。

当检测到通过UI选择特定区段的用户交互时，控制器130可控制显示器110来显示提供针对特定区段的多个服务的列表。这里，列表可包括提供预览服务的预览图标、提供存储服务的存储图标、提供共享服务的共享图标和提供编辑服务的编辑图标中的至少一个。

另外，当检测到选择包括在列表中的多个服务中的一个的用户交互时，控制器130可提供为特定区段而选择的服务。例如，当检测到选择包括在列表中的多个图标中的预览图标的用户交互时，控制器130可控制显示器110来在显示屏的一个区域上播放特定区段的图像内容。如又一示例，当检测到选择包括在列表中的多个图标中的存储图标的用户交互时，控制器130可存储特定区段的图像内容。如又一示例，当检测到选择包括在列表中的多个图标中的共享图标的用户交互时，控制器130可将特定区段的图像内容上传至外部服务器。

因此，用户可通过用户终端100接收针对由显示装置200显示的图像内容的各种服务。

同时，虽然上述示例性实施方式示出了多个服务被提供至图像内容的一个图像的情况，但是这仅是一个示例。多个服务可提供至图像内容的多个相关图像中的一个或多个相关图像。

根据本公开另一示例性实施方式，当在用户终端100显示图像内容的情况下从显示装置200接收到事件图像内容时，控制器130可控制显示器110来在显示屏的一个区域上显示事件图像内容。这里，事件图像内容可以是由用户预订的预订图像内容、内容供应商的推荐图像内容和广告内容中的一个。

另外，当检测到选择显示在显示屏的一个区域上的事件图像内容的用户交互时，控制器130可控制显示器110来将显示在显示屏的一个区域上的事件图像内容扩展至整个屏来进行显示。

这里，预设事件可以是显示由用户预先指定的预订节目的事件或者是显示由内容供应商推荐的节目的事件。

图3是详细地示出了根据本公开示例性实施方式的用户终端100的配置的框图。如图3中所示，用户终端100包括显示器110、通信器140、音频输出部150、存储器160、图像处理器170、音频处理器180、传感器120和控制器130。

同时，以示例的方式，图3大体示出了在用户终端100是包括诸如内容提供功能、显示功能、通信功能等多个功能的设备的情况下的多个部件。因此，根据示例性实施方式，可省略或修改图3中示出的一些部件，以及也可进一步添加其它部件。

显示器110显示通过由图像处理器170处理通过通信器140接收到的图像数据而获得的视频帧和由图形处理器143生成的多个画面中的至少一个。具体地，显示器110可显示从外部显示装置200接收到的一个图像内容的相关图像。例如，显示器110可同时显示由显示装置200当前显示的图像内容、通过以多个角度拍摄图像内容而获得的多角度图像以及与图像内容有关的相关信息。

通信器120是根据多种类型的通信方案执行与多种类型的外部装置的通信的部件。通信器120可包括诸如Wi-Fi芯片、蓝牙芯片、NFC芯片、无线通信芯片等多种通信芯片。这里，Wi-Fi芯片、蓝牙芯片和NFC芯片分别以Wi-Fi方法、蓝牙方法和NFC方法执行通信。在这些芯片之中，NFC芯片意指以使用诸如135kHz、13.56MHz、433MHz、860MHz至960MHz、2.45GHz等多种RF-ID频带中的13.56MHz的频带通过NFC方法工作的芯片。在使用Wi-Fi芯片或蓝牙芯片的情况下，诸如SSID、对话密钥等多种访问信息可首先传输和接收，可使用多种访问信息来执行通信访问，然后多种信息可被传输和接收。无线通信芯片意指根据诸如IEEE、ZigBee、3G、3GPP、LTE等多种通信标准来执行通信的芯片。

具体地，通信器120可执行与显示装置200配对，以接收针对从显示装置200接收到的图像内容的一个或多个相关图像。在下文中，将参照图4A至图7B更详细地描述用户终端100与显示装置200之间的通信方法。

图4A和图4B以及图5A至图5C是示出了根据本公开示例性实施方式用于将显示装置200与用户终端100配对的方法的图示。

如图4A所示，显示装置200和用户终端100可通过接入点(AP)装置410互相连接以执行无线通信。例如，AP装置410可实现为传输Wi-Fi信号的无线路由器。然而，在一些情况下，显示装置200和用户终端100还可通过Wi-Fi直连互相连接，Wi-Fi直连是P2P构思中能够在没有无线路由器的情况下直接连接Wi-Fi终端的新Wi-Fi技术。

同时，如所示，显示装置200可连接有机顶盒420，机顶盒420具有使用诸如视频点播(VOD)内容、图像家庭购物、网络游戏等下一代双向多媒体通信服务(称为交互式TV)所需的家庭通信终端功能。这里，作为为TV提供互联网用户接口的设备的机顶盒还具有网页浏览器，从而作为实际上能够通过互联网和诸如TCP/IP等协议传输和接收数据的专用计算机。近来，机顶盒可通过电话线、用于有线TV的线、用于网络TV服务的线等提供服务，以及包括作为基础功能的接收/转换图像信号的功能。

如图4B所示，用户终端100将Wi-Fi数据(①)传输至显示装置200。在这种情况下，Wi-Fi数据可实现为使得相同制造商的显示装置200识别，但是通用商业AP不识别并且丢弃。在这种情况下，可通过使用Wi-Fi标准格式限定新数据类型而减少对改变H/W芯片组的需求。相应地，芯片组制造商仅提供用于新数据格式的API，并且新数据格式由制造商独立限定，从而使得新数据格式能够被作为机密信息保存。同时，由于Wi-Fi数据是Wi-Fi信号，所以Wi-Fi数据可穿过墙壁并且可传输至邻居的作为非连接目标的TV，但是配对可通过区分我的家和邻居家来执行。

此后，显示装置200将Wi-Fi数据的响应数据(②)传输至用户终端100。具体地，识别Wi-Fi数据的显示装置200回复显示装置200的当前AP连接信息。在这种情况下，非连接目标的响应可通过仅在有限空间/距离中产生通信的附加技术(诸如超声波、红外(IR)或NFC)而受到限制。

可替代地，作为②的替代，可传输请求连接信息的数据(③)。在这种情况下，在①的Wi-Fi数据之后，可立即使用诸如超声波、IR或NFC的附加技术请求我们公司周围的TV的当前AP连接信息。这里，识别①的数据的显示装置200等待③请求的数据，以及由仅在有限空间/距离内产生通信的附加技术传输的连接信息请求数据不传输至非连接目标TV。

可替代地，作为②的替代，可传输针对连接信息请求的响应数据(④)。因为AP连接信息使用Wi-Fi传输并且③的连接信息请求数据仅传输至连接目标TV，所以识别③的数据的显示装置200通过通用Wi-Fi响应。然而，当使用超声波时，因为②的情况需要使用TV SPK，所以SPK的输出范围等是重要的，并且③+④的情况可能受限于TV必须具有传声器。

此后，传输AP连接请求数据(⑤)。在这种情况下，由于从作为连接目标的显示装置200获取当前AP连接信息，所以可使用对应的信息请求向对应的AP的连接。

配对可根据如上所述的配对方法通过使如图5A所示的用户干预最小化来执行。例如，配对可仅通过通电来执行。也就是说，在显示装置200先启动的情况下，当启动用户终端100时，用户终端100可在无附加操作的情况下获得现有显示装置200中的网络(N/W)信息，并且可连接至N/W，从而可以与显示装置200配对，反之亦然。另外，经过一次配对的装置不需要再配对。

另外，如图5B所示，配对可通过区分连接目标与非连接目标来执行。例如，非配对目标装置(例如，邻居的TV)可被识别，从而被阻挡。

另外，如图5C所示，可使对网络环境的限制最小化。例如，即使在另一网络介于两者之间的情况下，也可执行配对。

另外，虽然未在附图中示出，但是在一些情况下，还可考虑使用诸如IR/超声波/NFC的其它局域网技术，以在有限空间内传输或接收配对目标的预连接网络信息。

图6A至图6C是示出了根据本公开示例性实施方式用于实现网络拓扑的方法的图示。

参照图6A，用户终端100可实现为能够通过AP装置410或显示装置200始终连接至互联网。在这种情况下,可根据是否存在显示装置200和AP装置410或者根据互联网连接状态来确定连接环境。也就是说，在任何情况下，用户终端100都可以以互联网可连接形式实施。

参照图6B，网络拓扑可根据服务场景以多种形式变化。例如，当图像从显示装置200实时地传输至用户终端100时，显示装置200和用户终端100可以以P2P形式直接互相连接。在这种情况下，网络拓扑中的变化迅速产生，使得可不出现由服务变化而造成的延时。

参照图6C，用户终端100可实现为能够使用Wi-Fi控制通电/断电。例如，用户终端100可需要使用Wi-Fi来使处于断电状态的显示装置200通电，以及相反地，可需要使用Wi-Fi来使处于通电状态的显示装置200断电。

图7A和图7B是示出了根据本公开另一示例性实施方式用于实施网络拓扑的方法的图示。

如图7A所示，用户终端100可实现为通过显示装置200中的网关服务器来远程地控制诸如STB的外部装置。另外，用户终端100可实现为通过在无需安装的情况下设定集成远程控制器来控制诸如STB的外部装置。

如图7B所示,显示装置200和用户终端100可提供诸如推送视图、拖拽视图、多角度视图等各种内容流。

再次参照图3，音频输出部150是输出多种提醒声音或语音消息以及多种音频数据的部件，针对这些提醒声音、语音消息及多种音频数据，音频处理器180执行诸如解码、放大和噪音过滤的多种处理任务。具体地，当用户终端100显示多个相关图像时，音频输出部150可输出与由用户在多个相关图像之中选择的一个相关图像对应的音频。

存储器160存储用于控制用户终端100的多种软件模块。将参照图8描述存储在存储器160中的多种软件模块。

如图8所示，存储器160可存储包括基础模块161、感测模块162、通信模块163、展现模块164、网页浏览模块165和服务模块166的软件。

基础模块161意指处理从包括在用户终端100中的相应硬件传送信号并且将经处理的信号传送至高层模块的基础模块。基础模块161包括存储模块161-1、安全模块161-2、网络模块161-3等。存储模块161-1是管理数据库(DB)或注册的程序模块。主CPU134可使用存储模块161-1访问存储器160中的数据库，从而读取各种数据。安全模块161-2是支持用于硬件的验证、请求许可、安全存储等的程序模块，以及网络模块161-3(网络模块161-3是支持网络连接的模块)包括DNET模块、UPnP模块等。

感测模块162是从多种传感器采集信息以及分析并管理所采集的信息的模块。感测模块162还可包括触摸识别模块、前进方向识别模块、面部识别模块、语音识别模块、运动识别模块、NFC识别模块等。

通信模块163是用于执行与外部的通信的模块。通信模块163可包括用于与外部装置通信的装置模块、收发模块(诸如信使程序、短消息服务(SMS)&多媒体消息服务(MMS)程序、电子邮件程序等)以及包括呼叫信息整合器程序模块的呼叫模块、VoIP模块等。

展现模块164是用于配置显示屏的模块。展现模块164包括用于播放并输出多媒体内容的多媒体模块以及执行UI和图形处理的UI渲染模块。多媒体模块可包括播放器模块、摄录机模块、声音处理模块等。因此，多媒体模块播放多种多媒体内容，以执行生成并播放画面和声音的操作。UI渲染模块可包括组合图像的图像合成器模块、在待显示图像的屏幕上组合并生成坐标的坐标组合模块、从硬件接收多种事件的X11模块、提供用于配置2D或3D类型UI的工具的2D/3D UI工具箱等。

网页浏览模块165意指执行网页浏览以访问网页服务器的模块。网页浏览模块165可包括诸如配置网页页面的网页视图模块、执行下载的下载代理模块、书签模块、网页工具包(webkit)模块等多种模块。

服务模块166是包括用于提供多种服务的多种应用的模块。具体地，服务模块166可包括诸如SNS程序、内容播放程序、游戏程序、电子书程序、日历程序、提醒管理程序及其它控件的多种程序模块。

另外，存储器160可包括缓存器，图像内容的相关图像被暂时存储在缓存器中，从而用户终端100和显示装置200可互相同步以播放图像内容。存储在缓存器中的相关图像可根据图像内容的时间戳信息而被输出至显示器110。

图像处理器170是对包括通过通信器140所接收的图像内容的图像流进执行处理的部件。图像处理器170可对图像流执行诸如解码、多路复用、缩放、噪音过滤、帧率转换、分辨率转换等多种图像处理。

音频处理器180是对图像内容的音频数据执行处理的部件。音频处理器180可对音频数据执行诸如解码、放大、噪音过滤等多种处理。通过音频处理器180处理的音频数据可输出至音频输出部150。

传感器130检测用于控制用户终端100的配置的多种用户交互。具体地，传感器130可实现为用于检测用户的触摸交互的触摸传感器。这里，触摸传感器可布置在显示器110的后表面上以实现为触摸屏。

控制器130可使用存储在存储器160中的多种程序来控制用户终端100的总体操作。

如图3所示，控制器130包括随机存取存储器(RAM)131、只读存储器(ROM)132、图形处理器133、主中央处理器(CPU)134、第一接口135-1至第n接口135-n以及总线136。这里，RAM 131、ROM 132、图形处理器133、主CPU 134、第一接口135-1至第n接口135-n等可通过总线136互相连接。

ROM 132存储用于启动系统的指令的集合。当启动指令输入从而为主CPU 134供电时，主CPU 134根据存储在ROM 132中的指令将存储在存储器160中的操作系统(O/S)复制到RAM 131，并且执行O/S以启动系统。当系统启动完成时，主CPU 134将存储在存储器160中的多种应用程序复制到RAM 131，并且执行复制到RAM 131的应用程序以执行多种操作。

图形处理器133使用计算器(未示出)和渲染器(未示出)来生成包括诸如指针、图标、图像、文本等多种对象的画面。计算器使用从输入部接收到的控制指令根据画面的布局计算诸如坐标值、形状、尺寸、颜色等属性值，其中，相应的对象根据这些属性值进行显示。渲染器基于由计算器计算出的属性值生成包括对象的多种布局的画面。通过渲染器生成的画面在显示器110的显示区域中显示。

主CPU 134访问存储器160，并且使用存储在存储器160中的O/S执行启动。另外，主CPU 134使用存储在存储器160中的多种程序、内容、数据等来执行多种操作。

第一接口135-1至第n接口135-n连接至上述多种部件。接口中的一个可以是通过网络连接至外部装置的网络接口。

具体地，控制器130可控制通信器140来从外部显示装置200接收由显示装置200当前显示的图像内容的多个相关图像的图像流。这里，图像流可包括图像内容的元数据以及图像内容的多个相关图像的数据。

具体地，当图像内容是广播内容时，控制器130可控制通信器140来接收由显示装置200当前显示的广播内容的多个相关图像的图像流。这里，多个相关图像可以是通过以多个角度拍摄图像内容而获得的多角度图像。例如，当显示装置200当前显示在第一观察点处拍摄的第一角度图像时，控制器130可控制通信器140来接收包括在与第一观察点不同的观察点处拍摄的第二角度图像至第五角度图像的图像流。

另外，控制器130可将接收到图像流存储在存储器160中。这里，控制器130可存储全部所接收的图像流，但这仅是一个示例。控制器130可将所接收的图像流暂时存储在FIFO方案的缓存器中。例如，控制器130可将所接收的图像流暂时存储在缓存器中保持90秒。

另外，控制器130可控制图像处理器170来处理接收到的图像流以生成多个相关图像，以及可控制显示器110来显示所生成的多个相关图像。例如，如图9A所示，当显示装置200显示在第一观察点处拍摄的第一角度图像时，控制器130可控制显示器110来将显示屏分为四等分来显示在与第一观察点不同的观察点处拍摄的第二角度图像910-1至第五角度图像910-4。

这里，控制器130可控制显示器110来使用包括在图像流的元数据中的时间戳信息显示与由显示装置200显示的图像同步的多个相关图像。

当在显示多个相关图像的情况下检测到预设用户交互时，控制器130可控制显示器110来显示用于提供时移功能的UI。

具体地，当在按照图9A所示显示第二角度图像910-1至第五角度图像910-4的情况下检测到触摸显示器110(即，触摸屏)的用户交互时，如图9B所示，控制器130可控制显示器110来在显示屏的下部上显示进度条形式的UI 920。这里，进度条形式的UI 920可映射到图像内容的播放时间。

另外，当检测到通过UI选择特定时间点的用户交互时，控制器130可从特定时间点开始播放多个相关图像。

具体地，如图9B中所示，当检测到触摸UI 920的第一点并随后执行向第二点的拖拽的用户交互时，控制器130可确定与第二点对应的播放时间点t1。另外，如图9C所示，控制器130可时移第二角度图像910-1'至第五角度图像910-4'并且从确定的播放时间点t1开始播放第二角度图像910-1'至第五角度图像910-4'。

具体地，控制器130可控制显示器110来使用存储在存储器160中的图像流从播放时间点t1开始显示多个相关图像。同时，在图像流未存储在存储器160中的情况下，控制器130可控制通信器140来将与图像内容有关的信息和与播放时间点t1有关的信息传输至外部服务器。当外部服务器基于与图像内容有关的信息以及与播放时间点t1有关的信息传输播放时间点t1之后的图像内容的多个相关图像时，控制器130可控制显示器110来显示所传输的图像内容的多个相关图像。

同时，控制器130可提供针对多个相关图像中的一个相关图像的时移功能。

具体地，如图10A中所示，当在显示第二角度图像1010-1至第五角度图像1010-4情况下检测到触摸显示第三角度图像1010-2的区域的用户交互时，如图10B所示，控制器130可控制显示器110来在第三角度图像的下部上显示进度条形式的UI 1020。这里，进度条形式的UI 1020可映射到第三角度图像1010-2的播放时间。

另外，如图10B所示，当检测到触摸UI 1020的第一点并且然后执行向第二点的拖拽的用户交互时，控制器130可确定与第二点对应的播放时间点t2。另外，如图10C所示，控制器130可时移第三角度图像1010-2'并且可从确定的播放时间点t2开始播放第三角度图像1010-2'。这里，如图10c所示，控制器130可保持第二角度图像1010-1、第四角度图像1010-3和第五角度图像1010-4的播放状态。

另外，当在第三角度图像1010-2'被时移后检测到针对第三角度图像1010-2'的预设用户交互(例如，连续触摸第三角度图像1010-2'被触摸的区域的用户交互)时，控制器130可控制显示器110来使第三角度图像1010-2'扩展至整个屏幕来进行显示。

如上所述，通过将时移功能提供至一个图像内容的多个相关图像，用户可在不被干扰观看由显示装置200显示的图像内容的情况下更直观地确认图像内容的相关图像的在前画面和未来画面。

根据本公开另一示例性实施方式，控制器130可控制通信器140来从外部显示装置200接收针对图像内容的图像流。这里，图像流可包括图像内容的元数据以及针对图像内容的数据。

另外，如图11A所示，控制器130可控制图像处理器170来处理所接收的图像流以生成图像内容，以及控制器130可控制显示器110来显示生成的图像内容。这里，控制器130可控制显示器110来使用包括在图像流的元数据中的时间戳信息显示与由显示装置200当前显示的图像内容同步的图像内容。

如图11B所示，当在显示图像内容的情况下检测到触摸显示器110(即，触摸屏)的用户交互时，控制器130可控制显示器110来显示用于选择图像内容的特定区段的进度条形式的UI 1110。这里，进度条形式的UI 1110可映射到图像内容的播放时间。

另外，如图11B所示，当触摸进度条的第一点时，控制器130可控制显示器110来在第一点的上部上显示第一缩略图像1120，其中，第一缩略图像1120显示在与第一点对应的播放时间t3处。另外，如图11C所示，当触摸进度条的第二点时，控制器130可控制显示器110来在第二点的上部上显示第二缩略图像1130，其中，第二缩略图像1130显示在与第二点对应的播放时间t4处。

另外，当选择第一点和第二点时，控制器130可通过将与第二点对应的播放时间t4设定为起始点并且将与第一点对应的播放时间t3设定为结束点来设定剪辑区段。

另外，当设定剪辑区段时，控制器130可控制显示器110来在第一缩略图像1120和第二缩略图像1130的上部上显示提供用于剪辑区段的多种服务的列表1140。这里，列表1140可包括提供存储服务的存储图标1141、提供预览的预览图标1142、提供共享服务的共享图标1143和提供编辑服务的编辑图标1144。

如图11E所示，当检测到选择多个图标1141至1144之中的存储图标1141的用户交互时，控制器130可控制显示器110来将剪辑区段存储在存储器160中并且显示导引消息1150“已经存储。是否观看存储的剪辑？”。

如图11F所示，当检测到选择多个图标1141至1144之中的预览图标1142的用户交互时，控制器130可控制显示器110来在显示屏的一个区域上显示用于预览的窗口1160。当通过窗口1160输入预览指令时，控制器130可通过窗口1160播放剪辑区段的图像内容。

如图11G所示，当检测到选择多个图标1141至1144之中的共享图标1143的用户交互时，控制器130可控制显示器110来显示用于共享剪辑区段的共享窗口1170。当选择包括在共享窗口1170中的多个SNS服务中的一个时，控制器130可控制通信器140来将剪辑区段的图像内容传输至与所选择的SNS服务对应的服务器。例如，当选择包括在共享窗口1170中的多个SNS服务中的“A”时，控制器130可控制通信器140来将剪辑区段的图像内容传输至与“A”对应的服务器。

当检测到选择多个图标1141至1144之中的编辑图标1144的用户交互时，控制器130可控制显示器110来显示用于编辑剪辑区段的编辑窗口。

根据上述示例性实施方式，用户可在不被干扰观看由显示装置200显示的图像内容的情况下接收针对所选择的、图像内容的特定区段的多种服务。

根据本公开另一示例性实施方式，控制器130可控制通信器140来从外部显示装置200接收针对图像内容的图像流。这里，图像流可包括图像内容的元数据以及图像内容的数据。

另外，如图12A所示，控制器130可控制图像处理器170来处理接收到的图像流以生成图像内容，以及控制器130可控制显示器110来显示生成的图像内容1210。这里，控制器130可控制显示器110来使用包括在图像流的元数据中的时间戳信息显示与由显示装置200当前显示的图像内容同步的图像内容。

如图12B所示，当在显示图像内容的情况下从显示装置200接收到预设事件图像内容时，控制器130可控制显示器110来在显示屏的右下部处以PIP形式显示所接收的事件图像内容1220。这里，事件图像内容1220可以是由用户预定的预订图像内容、由内容供应商推荐的推荐图像内容以及广告图像内容。这里，广告图像内容的广告对象可以是包括在由图像内容当前显示的画面中的产品。另外，事件图像内容可作为独立的图像流传输，但这仅是一个示例。事件图像内容可以与现有图像内容复合来进行传输。

另外，如图12B所示，当按照图12B所示在显示屏的右下部处以PIP形式显示事件图像内容的情况下检测到连续触摸显示事件图像内容的区域的用户交互时，如图12C所示，控制器130可控制显示器110来将事件图像内容1220'扩展至整个屏幕进行显示，以及在PIP屏幕上显示现有图像内容1210'。

另外，如图12C所示，当在按照如12C所示显示事件图像内容1220'和图像内容1210'的情况下在预设时间内未检测到用户交互时，如图12D所示，控制器130可控制显示器110来将显示在PIP屏幕上的图像内容1210'移除并且显示事件图像内容1220'。

当在按照图12C所示显示事件图像内容1220'和图像内容1210'的情况下检测到触摸显示图像内容1210'的区域的用户交互时，控制器130可控制显示器110来按照图12B所示再次在整个屏幕上显示图像内容1210并且在PIP屏幕上显示事件图像内容1220。

用户通过如上所述将事件图像内容提供至PIP屏幕而可在不被干扰观看由显示装置200播放的图像内容的情况下确认多种事件图像。

同时，虽然上述示例性实施方式阐明了从显示装置200接收事件图像内容的情况，但这仅是一个示例。事件图像内容可预先存储在用户终端100中，以及还可从外部服务器接收。

同时，虽然上述示例性实施方式阐明了从显示装置200接收图像内容或图像内容的相关图像的情况，但这仅是一个示例。可通过互联网接收图像内容或图像内容的相关图像。在这种情况下，用户终端100可使用存储在外部服务器(具体地，云服务器)中的时间戳信息来显示与由显示装置200当前显示的图像内容同步的图像内容中的图像内容或相关图像。

在下文中，将参照图13至图15更详细地描述本公开。图13是示出了根据本公开示例性实施方式提供时移功能的示例的流程图。

首先，用户终端100显示一个图像内容的多个相关图像(S1310)。这里，多个相关图像可从显示装置200接收，并且可显示成与由显示装置200显示的一个图像内容同步。

另外，用户终端100确定是否检测到预设用户交互(S1320)。

如果检测到预设用户交互(S1320中的是)，则用户终端100显示时移功能的UI(S1330)。这里，时移功能的UI可以是映射到图像内容的播放时间的进度条形式的UI。

另外，用户终端100确定特定时间点是否通过UI被选择(S1340)。

如果特定时间点被选择(S1340中的是)，用户终端100从所选择的特定时间点开始播放多个相关图像。这里，用户终端100可使用预存储的图像流或从外部服务器接收到的图像流来从特定时间点开始播放多个相关图像。

图14是示出了根据本公开示例性实施方式提供针对图像内容的特定区段的多种服务的示例的流程图。

首先，用户终端100可显示图像内容(S1410)。这里，图像内容(与由显示装置200当前显示的图像内容相同的图像内容)可从显示装置200接收并且可显示成与由显示装置200显示的图像内容同步。

另外，用户终端100确定是否检测到预设用户交互(S1420)。

如果检测到预设用户交互(S1420中的是)，则用户终端100显示用于选择图像内容的特定区段的UI(S1430)。这里，用户终端100可显示映射到图像内容的播放时间的进度条形式的UI。

另外，用户终端100确定特定区段是否通过UI被选择(S1440)。

如果特定区段被选择(S1440中的是)，则用户终端100显示提供针对所选择的区段的多个服务的列表(S1450)。这里，列表可包括提供预览服务的预览图标、提供存储服务的存储图标、提供共享服务的共享图标和提供编辑服务的编辑图标中的至少一个。

另外，用户终端100确定多个服务中的一个是否被选择(S1460)。

当多个服务中的一个被选择时(S1460中的是)，用户终端100提供为特定区段而选择的服务(S1470)，具体地，当检测到选择包括在列表中的多个图标中的预览图标的用户交互时，用户终端100可在显示屏的一个区域上播放特定区段的图像内容。另外，当检测到选择包括在列表中的多个图标中的存储图标的用户交互时，用户终端100可将特定区段的图像内容存储在存储器中。另外，当检测到选择包括在列表中的多个图标中的共享图标的用户交互时，用户终端100可将特定区段的图像内容上传至外部服务器。

图15是示出了根据本公开示例性实施方式同时显示事件图像内容和图像内容的示例的流程图。

首先，用户终端100显示图像内容(S1510)。这里，图像内容(与由显示装置200当前显示的图像内容相同的图像内容)可从显示装置200接收并且可显示成与由显示装置200显示的图像内容同步。

另外，用户终端100确定是否接收到事件图像内容(S1520)。这里，事件图像内容可从显示装置200接收，以及可以是由用户预订的预订图像内容、由内容供应商推荐的推荐图像内容和广告图像内容中的一个。

另外，用户终端100在显示屏的一个区域上显示从外部接收到的事件图像内容(S1530)。这里，用户终端100可在显示屏的下部处以PIP形式显示事件图像内容。另外，当检测到针对事件图像内容的预设用户交互时，用户终端100可在整个屏幕上显示事件图像内容。

根据如上所述的本公开多种示例性实施方式，用户可在不被干扰观看由显示装置200显示的图像的情况下通过用户终端100来接收针对由显示装置显示的图像内容的多种服务和功能。

同时，根据上述多种示例性实施方式的针对显示装置的控制方法可在程序中实施以提供至显示装置。具体地，可提供非暂时性计算机可读介质，其中，非暂时性计算机可读介质存储有包括针对显示装置的控制方法的程序。

非暂时性计算机可读介质不表示短期存储数据的介质(例如，寄存器、高速缓存、内存等)，而是表示半永久地存储数据的机器可读介质。具体地，上述各种应用或程序可存储并且设置在非暂时性计算机可读介质(诸如，光盘(CD)、数字通用光盘(DVD)、硬盘、蓝光光盘、通用串行总线(USB)、存储卡、只读存储器(ROM)等)中。

在上文中，虽然已经示出并且描述了本公开示例性实施方式，但是应理解的是，本公开不限于公开的实施方式，以及在不背离本公开的精神和范围的情况下可由本领域技术人员进行各种改变。因此，本公开应被理解为包括本公开的精神和范围中包括的全部改变、等同和替换。