一种智能电视视听交互系统及其方法与流程

专利2022-05-09  140


本发明属于智能电视技术领域,特别涉及一种智能电视视听交互系统及其方法。



背景技术:

目前智能电视已经成为时下市场的主流,通过传统电视与智能系统的结合可以发挥电视更多的用处,使得智能电视在实现传统功能的同时可以实现社交、游戏等功能;然而目前智能电视也存在较多的问题,一是用户粘性不够,用户对于智能电视的使用还是停留于传统的观看需求,智能系统并未很好的发挥作用,提高用户的深度体验;二是目前的智能电视交互系统有待完善;目前市场的智能电视多为遥控器按键控制,对于智能电视的大尺寸来说,操作上捉襟见肘,例如为了点开某个应用需要连续点击方向键数十次才能实现,大大降低了用户体验,所以亟待开发一种智能电视视听交互系统及其方法。



技术实现要素:

(一)要解决的技术问题

本发明提供了一种智能电视视听交互系统及其方法,属于智能电视技术领域;包括:智能电视及智能遥控器;所述智能电视搭载有第一采集识别模块及第一管理模块;所述智能遥控器设有第二采集识别模块、指纹识别模块、无线通讯模块、语音模块及第二管理模块。本发明的特点在于,将眼球追踪技术、虹膜识别技术、人脸识别技术以及指纹识别技术植入智能电视及遥控器中;通过指纹、人脸、人眼、虹膜四层保护用户个人信息,并以智能电视为基点布局智能化全屋家具系统;同时通过眼球追踪装置与语音交互的结合,构建智能电视的深度沉浸体验;通过眼球追踪装置智能识别用户在使用智能电视的过程中眼球停留的时间、频率为用户个性化推荐服务,提高用户体验。

(二)技术方案

本发明通过如下技术方案实现:一种智能电视视听交互系统,包括:智能电视及智能遥控器;

所述智能电视搭载有第一采集识别模块及第一管理模块;

所述智能遥控器设有第二采集识别模块、指纹识别模块、无线通讯模块、语音模块及第二管理模块。

作为上述方案的进一步说明,所述第一采集识别模块设有识别摄像头、人眼追踪装置、虹膜检测装置;所述识别摄像头用户获取人脸信息,并通过人脸识别信息获取人眼区域;人眼区域识别锁定后通过人眼追踪装置自动追踪人眼,追踪成功后通过虹膜检测装置识别人眼虹膜获取用户权限信息;所述识别摄像头还用于识别肢体动作。

作为上述方案的进一步说明,所述第一管理模块用于管理已注册用户权限、管理新用户注册、管理用户信息存储。

作为上述方案的进一步说明,所述第二采集识别模块设有人脸识别摄像头、虹膜检测装置;所述人脸识别摄像头用于方便用户进行人脸信息登记注册;所述虹膜检测装置用于方便用户进行人眼虹膜信息登记注册。

作为上述方案的进一步说明,所述语音模块用于建立用户与智能电视之间的语音交互;所述无线通讯模块用于构建智能电视与遥控器之间的通讯;所述第二管理模块用于管理用户信息存储,并通过无线通讯模块传输信息至智能电视进行存储;所述指纹识别模块用于识别用户信息及唤醒电视。

本发明还提出一种智能电视视听交互方法,所述方法包括如下步骤:

步骤100:电视开机;

步骤200:指纹识别;

步骤300:检测人脸;

步骤400:追踪人眼;

步骤500:检测虹膜;

步骤600:交互开始。

作为上述方案的进一步说明,所述步骤200还包括如下步骤:

步骤210:是否为已注册用户;若为已注册用户进入步骤300;若为新用户则进入步骤220;

步骤220:智能电视提示是否注册;若不进行注册则进入电视界面开始使用;若进行注册进入步骤230;

步骤230:提示举起遥控器;

步骤240:指纹识别记录;

步骤250:人脸识别记录;

步骤260:虹膜识别记录;

步骤270:智能电视提示注册成功,进入步骤300。

作为上述方案的进一步说明,所述指纹识别记录、人脸识别记录、虹膜识别记录成功后存储于第二管理模块;并通过无线通讯模块传输信息至智能电视进行存储。

作为上述方案的进一步说明,所述步骤600交互开始包括记录人眼在智能电视画面中的停留时间及频率。

(三)有益效果

本发明相对于现有技术,具有以下有益效果:

本发明的特点在于,将眼球追踪技术、虹膜识别技术、人脸识别技术以及指纹识别技术植入智能电视及遥控器中;通过指纹、人脸、人眼、虹膜四层保护用户个人信息,并以智能电视为基点布局智能化全屋家具系统;同时通过眼球追踪装置与语音交互的结合,构建智能电视的深度沉浸体验;通过眼球追踪装置智能识别用户在使用智能电视的过程中眼球停留的时间、频率为用户个性化推荐服务,提高用户体验。

附图说明

通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:

图1为本发明视听交互方法步骤流程图;

图2为为本发明视听交互方法步骤200流程图;

图3为遥控器第二采集识别模块、指纹识别模块布局示意图;

图4为智能电视第一采集识别模块布局示意图;

图中:第二采集识别模块(1)、语音模块(2)、指纹识别模块(3)、第一采集识别模块(4)。

具体实施方式

请参阅图1至图4,一种智能电视视听交互系统,包括:智能电视及智能遥控器;

所述智能电视搭载有第一采集识别模块及第一管理模块;

所述智能遥控器设有第二采集识别模块、指纹识别模块、无线通讯模块、语音模块及第二管理模块。

其中,所述第一采集识别模块设有识别摄像头、人眼追踪装置、虹膜检测装置;所述识别摄像头用户获取人脸信息,并通过人脸识别信息获取人眼区域;人眼区域识别锁定后通过人眼追踪装置自动追踪人眼,追踪成功后通过虹膜检测装置识别人眼虹膜获取用户权限信息;所述识别摄像头还用于识别肢体动作。

其中,所述第一管理模块用于管理已注册用户权限、管理新用户注册、管理用户信息存储。

其中,所述第二采集识别模块设有人脸识别摄像头、虹膜检测装置;所述人脸识别摄像头用于方便用户进行人脸信息登记注册;所述虹膜检测装置用于方便用户进行人眼虹膜信息登记注册。

其中,所述语音模块用于建立用户与智能电视之间的语音交互;所述无线通讯模块用于构建智能电视与遥控器之间的通讯;所述第二管理模块用于管理用户信息存储,并通过无线通讯模块传输信息至智能电视进行存储;所述指纹识别模块用于识别用户信息及唤醒电视。

一种智能电视视听交互方法,包括如下步骤:

步骤100:电视开机;

步骤200:指纹识别;

步骤300:检测人脸;

步骤400:追踪人眼;

步骤500:检测虹膜;

步骤600:交互开始。

其中,所述步骤200还包括如下步骤:

步骤210:是否为已注册用户;若为已注册用户进入步骤300;若为新用户则进入步骤220;

步骤220:智能电视提示是否注册;若不进行注册则进入电视界面开始使用;若进行注册进入步骤230;

步骤230:提示举起遥控器;

步骤240:指纹识别记录;

步骤250:人脸识别记录;

步骤260:虹膜识别记录;

步骤270:智能电视提示注册成功,进入步骤300。

其中,所述指纹识别记录、人脸识别记录、虹膜识别记录成功后存储于第二管理模块;并通过无线通讯模块传输信息至智能电视进行存储。

其中,所述步骤600交互开始包括记录人眼在智能电视画面中的停留时间及频率。

工作原理:

本发明的特点在于,将眼球追踪技术、虹膜识别技术、人脸识别技术以及指纹识别技术植入智能电视及遥控器中;通过指纹、人脸、人眼、虹膜四层保护用户个人信息,并以智能电视为基点布局智能化全屋家具系统;同时通过眼球追踪装置与语音交互的结合,构建智能电视的深度沉浸体验;通过眼球追踪装置智能识别用户在使用智能电视的过程中眼球停留的时间、频率为用户个性化推荐服务,提高用户体验。

在使用时,用户坐在椅子上或者站立式举起遥控器,通过指纹识别模块唤醒智能电视,并触发指纹识别进行用户信息判别,若为已注册用户则进入电视界面开始交互使用;此时智能电视的第一采集识别模块会开始追踪人眼并识别,在使用智能电视的过程中,根据用户眼球停留的时间、频率对信息进行整理,实现一对一推荐,并将信息保留于第一管理模块,通过指纹识别和虹膜识别的双重管理,可以保证每个用户之间留存的信息不会发生混淆;当触发指纹识别进行用户信息判别为新用户时,则提示是否进行注册,若不进行注册,直接进入电视界面,此时智能电视第一采集识别模块自动处于待机状态;若进行注册则如图2至图3所示进行注册流程,进而保存新用户信息;若智能电视多人使用时,则通过第一管理模块设定留存的第一管理员进行识别并开放最高权限,如第一管理员不在则根据已注册用户信息进行交互使用,开放使用权限,若已注册用户信息人数较多则以唤醒智能电视的用户为第一优先权限;同时作为第一管理员可为用户设置多级别权限,保护用户个人隐私。在使用时,会根据权限开放者的人眼状态智能记录信息并推荐相应信息,例如某部电视剧的演员,当用户眼球停留时间较长、频率较高则可触发识别,并通过画中画的模式告知用户演员的个人信息;又例如当用户浏览页面时,发现某个产品,通过眼球追踪触发识别可提取画面中的信息并智能识别,进行推送。

在本发明的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、“逆时针”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的设备或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。

在本发明中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。

对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。在本发明中,除非另有明确的规定和限定,第一特征在第二特征之“上”或之“下”可以包括第一和第二特征直接接触,也可以包括第一和第二特征不是直接接触而是通过它们之间的另外的特征接触。而且,第一特征在第二特征“之上”、“上方”和“上面”包括第一特征在第二特征正上方和斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”包括第一特征在第二特征正下方和斜下方,或仅仅表示第一特征水平高度小于第二特征。

以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。


技术特征:

1.一种智能电视视听交互系统,包括:智能电视及智能遥控器;其特征在于:

所述智能电视搭载有第一采集识别模块及第一管理模块;

所述智能遥控器设有第二采集识别模块、指纹识别模块、无线通讯模块、语音模块及第二管理模块。

2.根据权利要求1所述的一种智能电视视听交互系统,其特征在于:所述第一采集识别模块设有识别摄像头、人眼追踪装置、虹膜检测装置;所述识别摄像头用户获取人脸信息,并通过人脸识别信息获取人眼区域;人眼区域识别锁定后通过人眼追踪装置自动追踪人眼,追踪成功后通过虹膜检测装置识别人眼虹膜获取用户权限信息;所述识别摄像头还用于识别肢体动作。

3.根据权利要求1所述的一种智能电视视听交互系统,其特征在于:所述第一管理模块用于管理已注册用户权限、管理新用户注册、管理用户信息存储。

4.根据权利要求1所述的一种智能电视视听交互系统,其特征在于:所述第二采集识别模块设有人脸识别摄像头、虹膜检测装置;所述人脸识别摄像头用于方便用户进行人脸信息登记注册;所述虹膜检测装置用于方便用户进行人眼虹膜信息登记注册。

5.根据权利要求1所述的一种智能电视视听交互系统,其特征在于:所述语音模块用于建立用户与智能电视之间的语音交互;所述无线通讯模块用于构建智能电视与遥控器之间的通讯;所述第二管理模块用于管理用户信息存储,并通过无线通讯模块传输信息至智能电视进行存储;所述指纹识别模块用于识别用户信息及唤醒电视。

6.一种智能电视视听交互方法,其特征在于:包括如下步骤:

步骤100:电视开机;

步骤200:指纹识别;

步骤300:检测人脸;

步骤400:追踪人眼;

步骤500:检测虹膜;

步骤600:交互开始。

7.根据权利要求6所述的一种智能电视视听交互方法,其特征在于:所述步骤200还包括如下步骤:

步骤210:是否为已注册用户;若为已注册用户进入步骤300;若为新用户则进入步骤220;

步骤220:智能电视提示是否注册;若不进行注册则进入电视界面开始使用;若进行注册进入步骤230;

步骤230:提示举起遥控器;

步骤240:指纹识别记录;

步骤250:人脸识别记录;

步骤260:虹膜识别记录;

步骤270:智能电视提示注册成功,进入步骤300。

8.根据权利要求7所述的一种智能电视视听交互方法,其特征在于:所述指纹识别记录、人脸识别记录、虹膜识别记录成功后存储于第二管理模块;并通过无线通讯模块传输信息至智能电视进行存储。

9.根据权利要求6所述的一种智能电视视听交互方法,其特征在于:所述步骤600交互开始包括记录人眼在智能电视画面中的停留时间及频率。

技术总结
本发明公开了一种智能电视视听交互系统及其方法,属于智能电视技术领域;包括:智能电视及智能遥控器;所述智能电视搭载有第一采集识别模块及第一管理模块;所述智能遥控器设有第二采集识别模块、指纹识别模块、无线通讯模块、语音模块及第二管理模块。本发明的特点在于,将眼球追踪技术、虹膜识别技术、人脸识别技术以及指纹识别技术植入智能电视及遥控器中;通过指纹、人脸、人眼、虹膜四层保护用户个人信息,并以智能电视为基点布局智能化全屋家具系统;同时通过眼球追踪装置与语音交互的结合,构建智能电视的深度沉浸体验;通过眼球追踪装置智能识别用户在使用智能电视的过程中眼球停留的时间、频率为用户个性化推荐服务,提高用户体验。

技术研发人员:叶威;钟建军
受保护的技术使用者:泉州市泽锐航科技有限公司
技术研发日:2021.04.22
技术公布日:2021.08.03

转载请注明原文地址:https://doc.8miu.com/read-547.html

最新回复(0)