显示装置及其控制方法与流程

显示装置及其控制方法
1.本申请是申请日为2016年12月28日、申请号为201680077338.4、发明名称为“显示装置及其控制方法”的发明专利申请的分案申请。
技术领域
2.与示例性实施例一致的装置和方法涉及一种显示装置及其控制方法，并且更具体地，涉及一种与其他显示装置执行视频呼叫的显示装置及其控制方法。


背景技术：

3.由于电子技术的发展，各种类型的电子设备被广泛用于各个领域。特别地，已经开发了可以实时地与其他显示装置共享内容并且同时执行视频呼叫的显示装置。
4.然而，由于显示区域的限制，当视频呼叫用户界面(ui)显示为较大时，可能妨碍用户观看内容。另一方面，如果视频呼叫ui显示为较小，则视频呼叫的含义褪色(discolor)。
5.因此，存在下述用途：检测对视频呼叫功能的利用并且灵活地改变视频呼叫ui，而同时不阻碍观看内容。


技术实现要素：

6.技术问题
7.一个或多个示例性实施例提供了一种根据视频呼叫的相对方的行为改变视频呼叫ui的大小的装置及其控制方法。
8.解决方案
9.根据示例性实施例的一方面，提供了一种显示装置，包括：通信接口，被配置为与其他显示装置进行通信；显示器，被配置为一起显示与所述其他显示装置共享的内容和用于与所述其他显示装置的用户的视频呼叫的视频呼叫用户界面(ui)；以及处理器，被配置为响应于确定从所述其他显示装置接收的视频呼叫数据中所包括的用户的手势和用户的语音中的至少一个满足预定条件，控制显示器改变显示在显示器上的视频呼叫ui的大小。
10.处理器还可以被配置为，响应于从所述其他显示装置接收的视频呼叫数据中所包括的用户的手势和语音中的至少一个被识别长于预定时间，逐渐地放大显示在显示器上的视频呼叫ui的大小。
11.处理器还可以被配置为，响应于从所述其他显示装置接收的视频呼叫数据中所包括的用户的语音的等级大于预定量，将显示在显示器上的视频呼叫ui的大小放大到预定大小。
12.处理器还可以被配置为，响应于用户的语音的等级大于内容的音量，将显示在显示器上的视频呼叫ui放大到预定大小。
13.处理器还可以被配置为，响应于在视频呼叫ui被放大到预定大小时、对于预定时间未识别到用户的语音，将显示在显示器上的视频呼叫ui返回到被放大之前的大小。
14.处理器还可以被配置为，响应于在从所述其他显示装置接收的语音呼叫数据中识
别用户的手势和语音中的至少一个，控制显示器在视频呼叫ui的边缘提供预定视觉反馈；以及响应于用户的被识别的手势和被识别的语音中的至少一个满足预定条件，改变显示在显示器上的视频呼叫ui的大小。
15.处理器还可以被配置为，响应于在从所述其他显示装置接收的视频呼叫数据中未识别到所述其他显示装置的用户的手势和语音，将显示在视频呼叫ui中的视频呼叫数据替换为预定图像。
16.处理器还可以被配置为，响应于在从所述其他显示装置接收的视频呼叫数据中所包括的用户的手势和语音中的至少一个未识别长于预定时间，逐渐地减小显示在显示器上的视频呼叫ui的大小。
17.处理器还可以被配置为，从所述其他显示装置接收所述其他显示装置的用户的隐私等级信息，并且基于所接收的隐私等级信息来改变显示在显示器上的视频呼叫ui的大小。
18.处理器还可以被配置为：响应于用户的手势和语音中的至少一个满足预定条件，从隐私等级信息确定所述其他显示装置的用户的隐私等级；以及如果用户的隐私等级小于预定等级，则改变显示在显示器上的视频呼叫ui的大小，而如果隐私等级大于或等于预定等级，则保持显示在显示器上的视频呼叫ui的大小。
19.根据另一示例性实施例的一方面，提供一种显示装置的控制方法，所述控制方法包括：一起显示与其他显示装置共享的内容和用于与所述其他显示装置的用户的视频呼叫的视频呼叫用户界面(ui)；以及响应于确定从所述其他显示装置接收的视频呼叫数据中包括的用户的手势和语音中的至少一个满足预定条件，改变显示在显示器上的视频呼叫ui的大小。
20.改变显示在显示器上的视频呼叫ui的大小可以包括，响应于从其他显示装置接收的视频呼叫数据中所包括的用户的手势和语音中的至少一个被识别长于预定时间，逐渐地放大显示在显示器上的视频呼叫ui的大小。
21.改变显示在显示器上的视频呼叫ui的大小可以包括，响应于从其他显示装置接收的视频呼叫数据中包括的用户的语音的等级大于预定大小，将显示器上显示的视频呼叫ui的大小放大到预定大小。
22.改变显示在显示器上的视频呼叫ui的大小可以包括，响应于用户的语音的等级大于内容的音量，将显示器上显示的视频呼叫ui放大到预定大小。
23.改变显示在显示器上的视频呼叫ui的大小可以包括，响应于在视频呼叫ui被放大到预定大小时、对于预定时间未识别到用户的语音，将显示在显示器上的视频呼叫ui返回到被放大之前的大小。
24.改变显示在显示器上的视频呼叫ui的大小可以包括，响应于在从所述其他显示装置接收的语音呼叫数据中识别用户的手势和语音中的至少一个，控制显示器在视频呼叫ui的边缘提供预定视觉反馈，以及响应于用户的被识别的手势和被识别的语音中的至少一个满足预定条件，改变显示在显示器上的视频呼叫ui的大小。
25.改变显示在显示器上的视频呼叫ui的大小可以包括，响应于在从所述其他显示装置接收的视频呼叫数据中未识别到用户的手势和语音，将显示在视频呼叫ui中的视频呼叫数据替换为预定图像。
26.改变显示在显示器上的视频呼叫ui的大小可以包括，响应于从所述其他显示装置接收的视频呼叫数据中所包括的用户的手势和语音中的至少一个未识别长于预定时间，逐渐地减小显示在显示器上的视频呼叫ui的大小。
27.改变显示器上的视频呼叫ui的大小可以包括，从所述其他显示装置接收所述其他显示装置的用户的隐私等级信息，基于所接收的隐私等级信息来改变显示在显示器上的视频呼叫ui的大小。
28.改变显示器上的视频呼叫ui的大小可以包括，响应于用户的手势和语音中的至少一个满足预定条件，当用户的隐私等级小于预定等级时，改变显示的视频呼叫ui的大小，并且当隐私等级大于或等于预定等级时，保持显示在显示器上的视频呼叫ui的大小。
29.根据另一示例性实施例的一方面，提供一种装置，包括：通信接口，被配置为与其他装置通信；处理器，被配置为：控制显示器一起显示与所述其他装置共享的内容和用于与所述其他装置的用户的视频呼叫的视频呼叫用户界面(ui)；以及响应于确定所述其他装置的用户的手势和用户的语音中的至少一个满足预定条件，控制显示器改变显示的视频呼叫ui的大小。
30.处理器还可以被配置为，响应于所述其他装置的用户的手势和语音中的至少一个被识别长于预定时间，逐渐地放大显示的视频呼叫ui的大小。
31.处理器还可以被配置为，响应于所述其他装置的用户的语音的音量等级大于预定量，将显示的视频呼叫ui的大小放大到预定大小。
32.处理器还可以被配置为，响应于从所述其他装置接收的语音呼叫数据中识别到用户的手势和语音中的至少一个，控制显示器在显示的视频呼叫ui的边缘提供预定视觉反馈，并且响应于用户的被识别的手势和被识别的语音中的至少一个满足预定条件，改变显示的视频呼叫ui的大小。
33.处理器还可以被配置为，接收所述其他装置的用户的隐私等级信息，并且基于接收的隐私等级信息来改变显示的视频呼叫ui的大小。
34.有益效果
35.根据一个或多个示例性实施例，显示装置可以根据视频呼叫的另一端的用户的行为来改变视频呼叫ui的大小并且吸引视频呼叫的用户的关注。
附图说明
36.从以下结合附图的描述中，上述和/或其他方面和特征将变得更加明显，其中：
37.图1是示出根据示例性实施例的视频呼叫系统的示图；
38.图2a和图2b是示出根据示例性实施例的显示装置的配置的示图；
39.图3是示出根据示例性实施例的用于改变视频呼叫ui的大小的方法的示图；
40.图4a至图4c是示出根据用户语音的操作的示例的示图；
41.图5a和图5b是示出用于向视频呼叫ui提供视觉反馈的方法的示例的示图；
42.图6是示出根据示例性实施例的在用户未识别的情况下的操作的示图；
43.图7是示出根据示例性实施例的减小视频呼叫ui的操作的示图；
44.图8是示出根据示例性实施例的根据隐私等级的操作的流程图；
45.图9是根据本公开的另一示例性实施例的描述根据隐私等级的操作的流程图；
46.图10是示出根据示例性实施例的显示装置的控制方法的流程图。
具体实施方式
47.下面参照附图详细描述示例性实施例。虽然它们在不同的附图中示出，但是相同或相似的部件可以由相同或相似的附图标记表示。可以省略本领域中已知的构造或处理的详细描述以避免模糊本公开的主题。
48.诸如第一和第二等的关系术语可以用于将一个实体与另一实体区分开，而不必暗示这些实体之间的任何实际关系或顺序。
49.在此使用的术语被提供为描述示例性实施例，而不意图限制本公开的范围。除非另有明确定义，否则单数术语包括复数。在此使用的术语“包括”和“被配置为”用于指示存在特征、数字、步骤、操作、元件、部分或其组合，并且这些术语不应当排除组合或添加一个或多个特征、数字、步骤、操作、元件、部分或其组合的可能性。
50.如在此所描述地，模块或单元可以执行至少一个功能或操作，并且可以被实现为硬件、软件或其组合。另外，多个模块或单元可以被集成到至少一个模块中并且可以被实现为至少一个处理，除了应当以硬件实现的模块或单元之外。当一个元件被称为“连接到”另一个元件时，这些元件可以直接连接或者可以在它们之间连接有第三元件。当一个元件被称为“直接连接到”另一个元件时，这些元件直接连接而在其间未连接有第三元件。
51.在此，表述“被配置为”可以与例如“适于”、“具有......的能力”、“被设计为”、“适应于”、“制成”或“能够”互换使用。表述“被配置为”在硬件意义上并不一定意味着“专门设计为”。相反，在某些情况下，“设备，被配置为”可以指示这样的设备可以与另一个设备或部件一起执行操作。例如，表述“处理器，被配置为执行a、b和c”可以指示执行相对应的操作的专用处理器(例如，嵌入式处理器)，或可以通过执行存储在存储设备中的一个或多个软件程序来执行相对应的操作的通用处理器(例如，中央处理单元(cpu)或应用处理器(ap))。
52.在此使用的技术术语将用于描述示例性实施例的目的，而不意图限制范围。另外，除非通过其他方式具体限定，否则在此使用的技术术语将被本领域普通技术人员解释为在本公开内容中理解的那样。此外，当技术术语不能精确地表示本公开的特征时，它们可以用本领域普通技术人员确定的含义替换。此外，如预先提供的定义的或者根据前后的上下文解释的在此所使用的术语不应被解释为具有过度减少的含义。
53.诸如“至少一个”的表述当在元件列表之前时，修饰整个元件列表二不修饰列表的单个元件。
54.以下，将参照附图更详细地描述一个或多个示例性实施例。
55.图1示出根据示例性实施例的视频呼叫系统1000。如图1所示，视频呼叫系统1000包括显示装置100和不同的显示装置200。
56.显示装置100可以体现为具有显示功能的各种类型的设备，诸如监视器、电视和信息站(kiosk)。显示装置100可以体现为固定型装置。
57.显示装置100可以与不同的显示装置200通信。显示装置100可以发送和接收视频数据和音频数据以与不同的显示装置200执行视频呼叫。视频数据可以是由不同的显示装置200捕获的视频数据，并且音频数据可以是输入到不同的显示装置200的音频数据。
58.除了与不同的显示装置200进行视频呼叫之外，显示装置100可以共享内容。例如，
显示装置100可以将电影内容发送到不同的显示装置200并且实时地再现它。
59.为了共享内容，显示装置100可以将内容发送到不同的显示装置200。显示装置100可以从不同的显示装置200接收要共享的内容。显示装置100和不同的显示装置200可以从服务器等接收相同内容并且实时显示内容。
60.在实时显示与不同的显示装置200共享的内容的同时，显示装置100可以进行视频呼叫。在这种情况下，显示装置100可以在显示区域的一侧上显示视频呼叫ui。
61.具体地，当从不同的显示装置200接收的视频呼叫数据中所包括的用户手势和语音中的至少一个满足预设条件(例如，预定条件)时，显示装置100可以改变视频呼叫ui的大小并且显示ui。
62.例如，当感测到诸如不同的显示装置200的用户的摇动手臂的操作时，显示装置100可以放大视频呼叫ui的大小并且显示它。
63.不同的显示装置200可以体现为具有显示功能的各种类型的装置，诸如监视器、电视和信息亭。具体地，不同的显示装置200可以是与显示装置100相同的装置，并且执行与显示装置100相同的功能，因此，将省略其详细描述。
64.图2a和图2b是示出根据示例性实施例的显示装置100的特征的框图。
65.如图2a所示，显示装置100包括通信接口110、显示器120和处理器130。
66.通信接口110可以与不同的显示装置200通信。通信接口110可以发送和接收与不同的显示装置200实时地共享的内容，并且发送和接收与视频呼叫有关的数据。
67.通信接口110可以执行与不同的显示装置200的单向或双向通信。通信接口110可以执行单向通信以向不同的显示装置200发送实时地共享的内容，或者从不同的显示装置200接收内容。通信接口110可以在与不同的显示装置200收发视频呼叫数据的同时执行双向通信。
68.显示器120可以通过处理器130的控制显示与不同的显示装置200实时地共享的内容，以及与不同的显示装置200的用户的视频呼叫ui。例如，显示器120可以在整个显示区域上显示实时地共享的内容并且在将被重叠的显示器的区域上显示视频呼叫ui。
69.另外，显示器120可以体现为液晶显示器(lcd)面板或有机发光二极管(oled)显示器，但是不限于此。根据一些情况，显示器120可以体现为柔性显示器和透明显示器。
70.处理器130控制显示装置100的整体操作。
71.当包括在从不同的显示装置200接收的视频呼叫数据中的手势和语音中的至少一个满足预设条件时，处理器130可以控制显示器120改变视频呼叫ui的大小并显示ui。
72.当包括在从不同的显示装置200接收的视频呼叫数据中的用户的手势和语音中的至少一个被识别超过预设时间(例如，预定时间)时，处理器130可以控制逐渐地放大视频呼叫ui并且显示它。
73.当从不同的显示装置200接收的视频呼叫数据中包括的用户语音大于或等于预设大小(例如，预定大小)时，处理器130可以控制将视频呼叫ui放大到预设大小并且显示ui。
74.当用户语音大于或等于内容音量时，处理器130可以控制将视频呼叫ui放大到预设大小并且显示ui。
75.在视频呼叫ui被放大到预设大小时，当用户语音未识别超过预设时间时，处理器130可以控制将放大视频呼叫ui返回到放大之前的大小并且显示ui。
76.另外，当从不同的显示装置200接收的视频呼叫数据中识别出用户的手势和语音中的至少一个时，处理器130可以进行控制以向视频呼叫ui的边缘提供预设视觉反馈，并且当识别的用户手势和语音中的至少一个满足预设条件时，改变视频呼叫ui的大小并且显示ui。
77.另外，当没有从不同的显示装置200接收的视频呼叫数据中识别用户的手势和语音时，处理器130可以控制将显示在视频呼叫ui上的视频呼叫数据替换为预设图像并且显示。
78.当包括在从不同的显示装置200接收的视频呼叫数据中的手势和语音中的至少一个未识别超过预设时间时，处理器130可以控制逐渐地减小视频呼叫ui并且显示ui。
79.处理器130可以控制从不同的显示装置200接收用户隐私等级信息，并且基于所接收的隐私等级信息来改变视频呼叫ui的大小并且显示ui。
80.在此，当用户手势和语音中的至少一个满足预设条件时，当用户的隐私等级小于预设等级时，处理器130可以控制改变视频呼叫ui的大小并且显示ui，而当该等级大于或等于预设等级时，控制不改变视频呼叫用户ui的大小。
81.图2b是示出显示装置100的示例的框图。参考图2b，显示装置100包括通信接口110、显示器120、处理器130、用户接口140、存储装置150、音频处理器160、视频处理器170、扬声器180、按钮181、相机182以及麦克风183。将不会进一步描述与图2a的元件重叠的元件。
82.通信接口110可以包括wi
‑
fi芯片111、蓝牙芯片112、无线通信芯片113和近场通信(nfc)芯片114。
83.处理器130使用存储在存储装置150中的各种程序来控制显示装置100的整体操作。
84.处理器130可以包括ram 131、rom 132、主cpu 133、图形处理器134、第一至接口135
‑
1至第n接口135
‑
n和总线136。
85.ram 131、rom 132、主cpu 133、图形处理器134、第一接口135
‑
1至第n接口135
‑
n等可以通过总线136互连。
86.第一接口135
‑
1至第n接口135
‑
n与前述元件连接。接口中的一个可以是通过网络与外部设备连接的网络接口。
87.主cpu 133通过访问存储装置150来使用存储在存储装置150中的o/s执行启动。使用存储装置150中存储的各种程序，执行各种操作。
88.rom 132在其中存储用于系统启动的命令。当打开(turn
‑
on)命令被输入并且供电时，主cpu 133根据存储在rom 132中的命令将存储在存储装置150中的o/s复制到ram 131，并且通过执行o/s来启动系统。当启动完成时，主cpu 133将存储在存储装置150中的各种应用程序复制到ram 131，并且通过执行复制到ram 131的应用程序来执行各种操作。
89.图形处理器134使用计算器和渲染器产生包括诸如图标、图像和文本的各种对象的屏幕。计算器基于接收的控制命令，根据屏幕的布局、形状、大小和颜色来计算属性值，诸如每个对象将被显示的坐标值。渲染器根据从计算器计算的属性值生成包括对象的各种布局的屏幕。从渲染器生成的屏幕显示在显示器120的显示区域内。
90.处理器130的上述操作可以通过存储在存储装置150中的程序来执行。
91.存储装置150存储各种数据，诸如用于操作显示装置100、视频数据分析模块、音频数据分析模块、视频呼叫模块和内容共享模块的操作系统(o/s)软件模块。
92.在这种情况下，处理器130可以基于存储在存储装置150中的信息来显示与不同的显示装置200实时地共享的内容和视频呼叫ui。
93.用户界面140接收各种用户交互。在此，根据显示装置100的示例性实施例，用户界面140可以被体现为各种类型。当显示装置100被体现为数字tv时，用户界面140可以被体现为从遥控设备接收遥控信号的遥控器接收单元、检测用户运动的相机以及接收用户语音的麦克风。另外，当显示装置100被体现为基于触摸的电子装置时，用户接口140可以被体现为与触摸板具有共同的层结构的触摸屏。在这种情况下，用户界面140可以用作上述显示器120。
94.触摸传感器可以体现为电容式的或电阻式的。电容式传感器指示下述传感器：通过使用涂覆在显示表面上的介电质来感测当用户身体的一部分与显示器的表面接触时传递到人体的电力来计算触摸坐标。电阻式触摸传感器包括设置在显示装置100中的两个电极板，并且当用户触摸表面时，被触摸的点的上板和下板彼此接触，从而感测电流的流动。此外，红外光感测方法、表面超声波传输方法、积分张力测量方法、压电效应方法可以用于感测触摸交互。
95.音频处理器160是处理音频数据的元件。音频处理器160可以执行各种处理，诸如音频数据的解码、放大和噪声滤波。
96.视频处理器170是执行视频数据处理的元件。视频处理器170可以执行各种图像处理，诸如解码、缩放、视频数据的噪声滤波、帧速率转换和分辨率转换。
97.扬声器180是用于输出各种警报声音或语音消息以及由音频处理器160处理的各种音频数据的元件。
98.按钮181可以是形成在显示装置100的主体的外部的任意区域(诸如，前部、侧部和后部)上的各种类型的按钮，诸如机械按钮、触摸板和滚轮。
99.相机182是根据用户的控制拍摄静止图像或运动图像的元件。相机182可以被体现为诸如前置相机和后置相机的多个相机。
100.麦克风183是接收用户语音和/或其他声音并将其转换为音频数据的元件。
101.以下描述一个或多个示例性实施例。
102.图3是示出根据示例性实施例的用于改变视频呼叫ui的方法的示图。
103.如图3所示，响应于从不同的显示装置200接收到的视频呼叫数据中所包括的用户手势和语音中的至少一个满足预设条件，处理器130可以控制显示器120改变视频呼叫ui的大小并且显示。例如，当接收的视频呼叫数据中包括的用户语音大于或等于预设大小时，处理器130可以放大视频呼叫ui的大小。
104.在此，处理器130可以提取从不同的显示装置200接收的视频呼叫数据中包括的用户的手势和语音。例如，处理器130可以忽略包括在视频呼叫数据中的喇叭或电视声音，并且仅提取用户语音。处理器130可以忽略在视频呼叫数据包括的视频之中的除用户之外的另一个人的手势并且仅提取用户手势。
105.示例性实施例不是限制性的，处理器130可以不提取用户的手势和语音，以及改变视频呼叫ui的大小并且基于视频数据中的手势和声音中的至少一个来显示ui。
106.具体地，当从不同的显示装置200接收的视频呼叫数据中包括的用户手势和语音中的至少一个被识别超过预设时间时，处理器130可以逐渐地放大视频呼叫ui并且显示ui。例如，处理器130可以将接收的视频呼叫数据中包括的用户语音保持在大于预设大小的大小超过10秒，视频呼叫ui的大小可以被放大。
107.在这种情况下，处理器130在预设时间期间可能对于短时间忽略沉默。例如，处理器130在用户语音被识别三秒并且之后一秒未识别时，如果用户语音被再次识别，则可以确定用户语音被继续。
108.处理器130可以逐渐地扩大并且显示视频呼叫ui。例如，处理器130在显示第一视频呼叫ui310时，当满足预设条件时，可以将视频呼叫ui的大小放大到第二视频呼叫ui 320和第三视频呼叫ui 330。处理器130可以逐渐地扩大视频呼叫ui并且显示ui。
109.处理器130可以基于从不同的显示装置200接收的视频呼叫数据中包括的用户的手势和语音中的至少一个来确定视频呼叫ui的大小。例如，处理器130可以基于用户语音的大小确定视频呼叫ui的大小。处理器130可以基于用户语音的持续时间来确定视频呼叫ui的大小。处理器130可以基于显示器120的大小和分辨率中的至少一个来确定视频呼叫ui的大小。
110.在图3中，示出在右下端将视频呼叫ui显示为圆形，但是示例性实施例不限于此。例如，处理器130可以根据用户操纵将视频呼叫ui的位置移动到另一区域，并且将形状改变为矩形形状。
111.另外，处理器130可以将视频呼叫ui覆盖在实时共享的内容上并且显示ui。处理器130可以改变视频呼叫ui的透明度并且显示ui。
112.处理器130可以显示视频呼叫ui占据特定区域。例如，处理器130可以将实时地共享的内容的显示区域与显示视频呼叫ui的区域减小一样多，并且显示该区域。
113.处理器130可以改变视频呼叫ui的大小及其形状。例如，处理器130可以放大视频呼叫ui的大小并且改变视频呼叫ui的边缘的颜色或视频呼叫ui的形状。
114.图4a至图4c是示出根据用户语音的操作的示例的示图。
115.如图4a所示，当从不同的显示装置200接收的视频呼叫数据中包括的用户语音大于预设大小时，处理器130可以将视频呼叫ui放大到预设大小并且显示。
116.在此，视频呼叫ui被放大到的预设大小可以由用户确定。基于显示器120的大小和分辨率中的至少一个，处理器130可以确定视频呼叫ui被放大到的预设大小。
117.图4a示出被放大到预设大小的视频呼叫ui 410的示例，但是其不限于此。例如，处理器130可以在整个区域上显示视频呼叫ui，或者以不同的大小和不同的形状显示。
118.如图4b所示，当用户语音大于内容的音量时，处理器130可以将视频呼叫ui放大到预设大小并且显示。例如，当语音430的大小大于声音的大小420时，通过将实时共享的声音大小420与视频呼叫数据中包括的语音的大小430进行比较，处理器130可以将视频呼叫ui放大到预设大小并且显示。
119.在此，处理器130可以提取视频呼叫数据中包括的用户语音并且确定其大小。例如，处理器130可以忽略视频呼叫数据中包括的喇叭声音和电视声音，以及仅提取用户语音并且将其与内容的声音大小进行比较。
120.如图4c所示，在视频呼叫ui被放大到预设大小时，当对于预设时间未识别用户语
630。
132.处理器130可以基于用户的预设手势或者语音而不是用户的视频来显示包括预设图像的第三视频呼叫ui 630。例如，处理器130可以根据握住右手的手势来显示包括预设图像的第三视频呼叫ui 630。
133.当用户的手势和语音未识别超过预设时间时，处理器130可以显示包括预设图像的第三视频呼叫ui 630。例如，当用户的手势和语音未识别超过10秒时，处理器130可以显示包括预设图像的第三视频呼叫ui 630。
134.在此，预设图像可以是从视频呼叫应用提供的基本图像或由用户设置的图像。处理器130可以显示紧接在超出设置在不同的显示装置200上的相机的角度之前的图像而不是预设图像。
135.图7是示出根据示例性实施例的减小视频呼叫ui的操作的视图。
136.如图7所示，当从不同的显示装置200接收的视频呼叫数据中包括的用户的手势和语音中的至少一个未识别超过预设时间时，处理器130可以逐渐地减小视频呼叫ui 710并且显示减小的视频呼叫ui 720。
137.例如，当包括在从不同的显示装置200接收到的视频呼叫数据中的用户没有表现出大的移动并且不说话时，处理器130可以逐渐地减小视频呼叫ui并且显示减小的视频呼叫ui。也就是说，即使当用户存在与设置在不同的显示装置200上的相机的角度内时，处理器130也可以逐渐地减小视频呼叫ui并且显示减小的视频ui。
138.示例性实施例不限于此，处理器130可以逐渐地减小视频呼叫ui。
139.即使当在设置在不同的显示装置200上的相机的角度内未识别出用户时，处理器130也可以逐渐地减小视频呼叫ui并且显示ui。
140.如图6所示，在显示包括预设图像的视频呼叫ui时，当经过预设时间时，处理器130可以逐渐地减小视频呼叫ui并且显示ui。
141.处理器130可以减小视频呼叫ui，然后可以不显示视频呼叫ui。在这种情况下，处理器130可以忽略包括在从不同的显示装置200接收的视频呼叫数据中的视频数据，并且仅输出音频数据。处理器130可以将请求音频数据的信号仅发送到不同的显示装置200，并且仅从不同的显示装置200接收音频数据。
142.在视频呼叫ui未被显示的同时与用户执行呼叫时，当用户的手势或语音被识别时，处理器130可以再次显示视频呼叫ui。在这种情况下，处理器130可以从不同的显示装置200接收视频数据和音频数据。
143.当视频呼叫ui未被显示时与用户进行呼叫时，如果用户的语音被再次识别，则处理器130可以再次显示视频呼叫ui。在这种情况下，处理器130可以仅从不同的显示装置200接收音频数据。
144.处理器130可以从不同的显示装置200接收用于显示视频呼叫ui的信号，并且再次显示视频呼叫ui。在这种情况下，不同的显示装置200可以识别用户手势或语音，并且向显示装置100发送信号以再次显示视频呼叫ui。
145.在用户手势或语音是预设手势或语音时，处理器130可以再次显示视频呼叫ui。例如，处理器130可以通过识别用户的话语(诸如“打开视频呼叫”)来再次显示视频呼叫ui。
146.图8是根据示例性实施例的描述根据隐私等级的操作的流程图。
147.首先，在操作s810中，从不同的显示装置200接收隐私等级信息。隐私等级信息是由用户设置的信息。例如，隐私等级信息可以是分为顶级、中级和低级的信息。然而，示例性实施例不限于此。
148.隐私等级信息可以是为特定情况设置操作方法的信息。例如，当用户未识别时，隐私等级信息可以显示预设图像；而当用户被识别时，基于用户手势和语音中的至少一个，隐私等级信息可以包括关于是否改变视频呼叫ui的大小的信息。
149.当接收到隐私等级信息时，处理器130可以确定用户的隐私等级是否是预设等级或更高(s820)。当用户的隐私等级小于预设等级时，处理器130在用户手势和语音中的至少一个满足预设条件时改变视频呼叫ui的大小(s830)。
150.另外，当用户的隐私等级大于预设等级时，处理器130不改变视频呼叫ui的大小(s840)。也就是说，即使当用户手势或语音被识别时，处理器130也可以不改变视频呼叫ui的大小。
151.图8示出了可以根据用户隐私等级信息来确定是否改变视频呼叫ui的大小，但是其不限于此。例如，处理器130可以根据用户的隐私等级信息确定是否改变视频呼叫ui的边缘的颜色。
152.图9是示出根据另一示例性实施例的根据隐私等级的操作的流程图。
153.从不同的显示装置200接收用户的隐私等级信息(s910)。
154.当接收到隐私等级信息时，处理器130确定用户的隐私等级是否大于预设等级(s920)。当用户的隐私等级小于预设等级时，处理器130在视频呼叫ui上显示用户的实时视频(s930)。也就是说，处理器130可以显示由设置在不同的显示装置200上的相机拍摄的视频。
155.当用户的隐私等级大于预设等级时，处理器130在视频呼叫ui上显示预设图像(s940)。在这种情况下，处理器130可以仅向不同的显示装置200发送请求音频数据的信号。处理器130可以向不同的显示装置200发送请求预设图像的信号。
156.图8和图9示出根据隐私等级信息确定视频呼叫ui的大小或视频呼叫ui的显示图像。也就是说，可以分别确定视频呼叫ui的大小和视频呼叫ui的显示图像。
157.例如，处理器130可以根据隐私等级信息来改变视频呼叫ui的大小，并且在视频呼叫ui上显示拍摄的图像，或者在视频呼叫ui上显示预设图像而不改变视频呼叫ui的大小。即使视频呼叫ui的大小根据隐私等级信息而改变，处理器130也可以在视频呼叫ui上显示预设图像。处理器130可以在视频呼叫ui上显示由用户拍摄的图像而不改变视频呼叫ui的大小。
158.图10是示出根据示例性实施例的用于控制显示装置的方法的流程图。
159.在操作s1010中，显示与不同的显示装置共享的内容和与不同的显示装置的用户的视频呼叫ui。另外，在操作s1020中，当从不同的显示装置接收的视频呼叫数据中包括的用户手势和语音中的至少一个满足预设条件时，视频呼叫ui的大小被改变并且显示。
160.在此，在操作s1020中，当从不同的显示装置接收的视频呼叫数据中包括的用户手势和语音中的至少一个被识别超过预设时间时，改变视频呼叫ui的大小并且显示ui可以逐渐地扩大视频呼叫ui并且显示ui。
161.此外，在操作s1020中，当从不同的显示装置接收的视频呼叫数据中包括的用户语
音大于预设大小时，改变大小并且显示可以将视频呼叫ui放大到预设大小并且显示ui。
162.具体地，在s1020中，当用户语音大于内容的音量时，改变大小并且显示可以放大视频呼叫ui并且显示。
163.另外，在s1020中，当视频呼叫ui被放大到预设大小时，当用户语音未识别预设时间时，改变大小并且显示可以将放大的视频呼叫ui返回到紧接在被放大之前的大小并且显示。
164.在s1020中，改变大小并且显示，当从不同的显示装置接收的视频呼叫数据中识别出用户手势和语音中的至少一个时，向视频呼叫ui的边缘提供预设视觉反馈；而当识别的用户手势和语音中的至少一个满足预设条件时，改变视频呼叫ui的大小并且显示。
165.另外，在s1020中，当从不同的显示装置接收的视频呼叫数据中未识别出用户手势和语音时，改变大小并且显示可以用预设图像替换显示在视频呼叫ui上的视频呼叫数据并且显示。
166.另外，在s1020中，当从不同的显示装置接收的视频呼叫数据中包括的用户手势和语音中的至少一个未识别超过预设时间时，改变大小并且显示可以逐渐减小视频呼叫ui并且显示视频呼叫ui。
167.另外，在s1020中，改变大小并且显示，可以从不同的显示装置接收用户的隐私等级信息，基于接收的隐私等级信息来改变视频呼叫ui的大小，以及显示ui。
168.在s1020中，当用户的隐私等级小于预设等级时，如果用户手势和语音中的至少一个满足预设条件，则改变大小并且显示改变视频呼叫ui的大小并显示，而当其大于预设等级，则改变大小并且显示可以不改变视频呼叫ui的大小。
169.根据一个或多个示例性实施例，显示装置可以根据视频呼叫的相对方的行为改变视频呼叫ui的大小并且吸引视频呼叫的用户的注意。
170.根据一个或多个示例性实施例，上面已经描述了基于不同的显示装置的手势和语音中的至少一个来改变视频呼叫ui的大小，但是其不限于此。
171.例如，通过反映与显示装置的用户的交互，可以改变视频呼叫ui的大小。在这种情况下，即使当不同的显示装置的用户手势和语音中的至少一个满足预设条件时，视频呼叫ui的大小也不会改变。根据不同的显示装置的用户手势和语音中的至少一个，当显示装置的用户操作时，显示装置可以改变视频呼叫ui的大小。
172.根据一个或多个示例性实施例的用于控制显示装置的方法可以体现为可由处理器或计算机执行并且存储在各个非临时性计算机可读介质中以提供给每个服务器或设备的程序代码，使得它可由服务器或设备的处理器执行。
173.作为示例，可以提供一种非临时性计算机可读介质，其中，程序顺序地执行如下步骤：显示与不同的显示装置实时地共享的内容和与不同的显示装置的用户的视频呼叫ui，从不同的显示装置接收视频呼叫数据，以及当视频呼叫数据中包括的用户手势和语音中的至少一个满足预设条件时，改变视频呼叫ui的大小并且显示视频呼叫ui。
174.非临时性计算机可记录介质是被配置为半永久性存储数据的装置可读介质。具体地，上述各种应用或程序可以存储在诸如压缩盘(cd)、数字多功能盘(dvd)、硬盘、蓝光盘、通用串行总线(usb)、存储卡或只读存储器(rom)的非临时性装置可读介质，然后可以被提供给用户终端设备。
175.虽然已经参照附图示出和描述了示例性实施例，但是本领域普通技术人员将理解，在不脱离所附权利要求定义的精神和范围内，可以在其中进行形式和细节上的各种改变。

技术特征：
1.一种显示装置，包括：通信接口，被配置为与其他显示装置进行通信；显示器；以及处理器，被配置为：通过所述通信接口接收包含所述其他显示装置的用户的语音的语音呼叫数据，控制所述显示器显示与所述视频呼叫数据对应的视频呼叫用户界面ui，控制所述显示器基于所述用户的语音的音量等级改变所述视频呼叫ui的显示大小，基于用户的语音未被识别，控制显示器逐渐减小视频呼叫ui的大小，并且移除视频呼叫ui，以及基于在移除视频呼叫ui时用户的语音未被识别，控制显示器显示视频呼叫ui。2.根据权利要求1所述的显示装置，其中，处理器还被配置为，基于所述用户的语音的音量等级大于预定量，控制所述显示器放大所述视频呼叫ui的显示大小。3.根据权利要求1所述的显示装置，其中，处理器还被配置为：控制所述显示器显示内容和所述视频呼叫ui，以及基于所述用户的语音的音量等级大于预定量，控制所述显示器放大所述视频呼叫ui的显示大小和减小内容的大小。4.根据权利要求3所述的显示装置，其中，所述视频呼叫ui和所述内容至少部分重叠。5.根据权利要求3所述的显示装置，其中，所述视频呼叫ui和所述内容同时显示在至少一些不同区域中。6.根据权利要求1所述的显示装置，其中，所述处理器还被配置为控制显示器将包括在所述视频呼叫ui中的用户图像替换为预定图像。7.根据权利要求1所述的显示装置，其中，所述处理器还被配置为，基于包括在所述视频呼叫ui中的用户手势满足预定条件，控制显示器改变所述视频呼叫ui的显示大小。8.根据权利要求1所述的显示装置，其中，所述处理器还被配置为，在移除所述视频呼叫ui时，执行与所述其他显示装置的语音呼叫。9.根据权利要求1所述的显示装置，其中，所述处理器还被配置为，基于所述用户的语音的识别时间，控制所述显示器改变所述视频呼叫ui的显示大小。10.根据权利要求1所述的显示装置，还包括：触摸屏，被配置为接收触摸输入，以及其中，所述处理器还被配置为，基于用户的触摸输入，控制所述显示器移动视频呼叫ui。11.根据权利要求1所述的显示装置，其中，所述处理器还被配置为：基于所述用户的语音的音量等级小于预定量，控制所述显示器逐渐减小视频呼叫ui并移除视频呼叫ui，基于在移除视频呼叫ui时用户的语音的音量等级大于预定量，控制所述显示器显示视频呼叫ui。12.一种显示装置的控制方法，该控制方法包括：接收包含其他显示装置的用户的语音的语音呼叫数据，显示与所述视频呼叫数据对应的视频呼叫用户界面ui，
基于所述用户的语音的音量等级改变所述视频呼叫ui的显示大小，其中，所述改变包括：基于用户的语音未被识别，逐渐减小视频呼叫ui的大小，并且移除视频呼叫ui，以及基于在移除视频呼叫ui时用户的语音未被识别，显示视频呼叫ui。13.根据权利要求12所述的控制方法，其中，所述改变包括：基于所述用户的语音的音量等级大于预定量，放大所述视频呼叫ui的显示大小。14.根据权利要求12所述的控制方法，其中，所述显示包括显示内容和所述视频呼叫ui，以及其中，所述改变包括：基于所述用户的语音的音量等级大于预定量，放大所述视频呼叫ui的显示大小和减小内容的大小。15.根据权利要求14所述的控制方法，其中，所述视频呼叫ui和所述内容至少部分重叠。16.根据权利要求14所述的控制方法，其中，所述视频呼叫ui和所述内容同时显示在至少一些不同区域中。17.根据权利要求12所述的控制方法，还包括：将包括在所述视频呼叫ui中的用户图像替换为预定图像。18.根据权利要求12所述的控制方法，其中，所述改变包括：基于包括在所述视频呼叫ui中的用户手势满足预定条件，改变所述视频呼叫ui的显示大小。19.根据权利要求12所述的控制方法，其中，所述移除包括：在移除所述视频呼叫ui时，执行与所述其他显示装置的语音呼叫。20.根据权利要求12所述的控制方法，其中，所述改变包括：基于所述用户的语音的识别时间，改变所述视频呼叫ui的显示大小。
技术总结
一种显示装置包括：通信接口，被配置为与其他显示装置进行通信；显示器，被配置为所述显示与其他显示装置共享的内容和用于与所述其他显示装置的用户的视频呼叫的视频呼叫用户界面(UI)；以及处理器，响应于从所述其他显示装置接收的视频呼叫数据中包括的用户的手势和语音中的至少一个满足预定条件，被配置为控制显示器改变显示在显示器上的视频呼叫UI的大小。的大小。的大小。


技术研发人员：郑盛旭 李省慧 张星炫 李官玟 李翔熙
受保护的技术使用者：三星电子株式会社
技术研发日：2016.12.28
技术公布日：2021/6/29