首页 > 乐器声学 专利正文
用于智能家具的基于离线模式和在线模式的语音系统的制作方法

时间:2022-02-24 阅读: 作者:专利查询

用于智能家具的基于离线模式和在线模式的语音系统的制作方法

1.本发明涉及语音服务设备领域,特别是涉及一种用于智能家具的基于离线模式和在线模式的语音系统。


背景技术:

2.随着人工智能技术的不断发展和日趋成熟,智能化产品在逐渐地影响和改变着我们的生活,并且现在已经成为了我们生活中不可或缺的一部分,而智能语音家具也在智能化技术迅速发展的浪潮之中逐渐兴起。
3.智能语音家具是智能语音技术与功能性沙发相结合的产物。在传统沙发的基础上,功能性沙发增加了姿态调整、形态变换、储物、充电、按摩功能。但是,功能性沙发所谓的“智能”仅仅是局限于机械硬件层面的自动化,而非程序应用层面的智能化。于是,智能语音家具应运而生,它不仅继承了功能性沙发的所有功能,还将智能语音技术融入其中,使得用户可以通过语音交互的方式实现对智能语音家具的控制和管理。但是,离线的智能语音识别技术虽然稳定,但识别准确性不高;在线的语音识别技术虽然识别准确性高,但稳定可靠性不足。另外,当前的智能语音家具系统功能模式单一,无法充分发挥系统的人机交互能力,更无法满足用户的日益增长的个性化体验的需求。
4.对于当前的智能语音家具系统,虽然能进行离线语音的识别,但是在离线模式下,语音识别指令关键字数量非常有限,且仅支持简短指令关键字的识别,否则将会严重影响指令关键字识别的准确性。另外,当前的智能语音家具系统仅局限于功能性家具的功能模式,没有与智能语音技术所带来的聊天、音乐模式相结合,导致人机交互能力不足和个性化体验差问题的出现。


技术实现要素:

5.本发明主要解决的技术问题是提供一种用于智能家具的基于离线模式和在线模式的语音系统,能够解决离线模式下指令关键字识别数量有限且准确性低的问题,以及人机交互效果和个性化体验差的问题。
6.为解决上述技术问题,本发明采用的一个技术方案是:提供一种用于智能家具的基于离线模式和在线模式的语音系统,包括唤醒模式、指令模式、聊天模式和音乐模式;唤醒模式:通过语音获取模块获得用户语音,并将语音数据通过离线语音识别模块获得关键词文本信息后发送至唤醒词检测模块,唤醒词检测模块检测关键词文本信息是否包含唤醒词,包含唤醒词则进入指令模式并将提示信息以语音的形式反馈给用户;指令模式:通过语音获取模块获得用户语音,并将语音数据通过离线语音识别模块获得关键词文本信息后发送至指令关键词检测模块,指令关键词检测模块检测关键词文本信息是否包含指令关键词,根据指令关键词进入唤醒模式、聊天模式、音乐模式或通过指令控制模块控制智能家具做相应动作并将提示信息以语音的形式反馈给用户;聊天模式:通过网络检测模块检测是否连接互联网,未连接互联网则退回指令模块,若连接互联网则进入聊天模式;通过语音获
取模块获得用户语音,并将语音数据通过在线语音识别模块获得文本信息后发送至指令关键词检测模块,指令关键词检测模块检测文本信息是否包含指令关键词,包含指令关键词进入指令模式、音乐模式或通过指令控制模块控制智能家具做相应动作并将提示信息以语音的形式反馈给用户,不包含指令关键词则通过在线聊天机器人与用户语音聊天;音乐模式:通过语音获取模块获得用户语音,并将语音数据通过离线语音识别模块获得关键词文本信息后发送至指令关键词检测模块,根指令关键词检测模块据检测关键词文本信息是否包含指令关键词,包含指令关键词进入指令模式、控制音乐播放模块播放音乐或通过指令控制模块控制智能家具做相应动作。
7.在本发明一个较佳实施例中,所述语音获取模块用于对用户发出的语音信息进行实时的接收和获取,并且对接收的语音信息进行降噪处理,以提高语音识别的准确率。
8.在本发明一个较佳实施例中,所述离线语音识别模块用于唤醒词和简短指令关键字的离线识别,将语音数据转换为文本信息。
9.在本发明一个较佳实施例中,所述用于对离线语音识别模块识别的语音文本信息进行检测,确定是否存在唤醒词,如果存在,则将预设的文本提示信息以语音的形式反馈给用户,如果不存在,则一直在唤醒模式中不断进行唤醒词的检测。
10.在本发明一个较佳实施例中,所述语音反馈模块将预设的文本提示信息以语音的形式反馈给用户。
11.在本发明一个较佳实施例中,所述指令关键字检测模块用于对离线语音识别模块识别的语音文本进行检测,确定是否存在指令关键字,如果存在,则对检测到的不同指令关键字的类型分别进行处理,指令关键字如果是基础操作指令,则会通过指令控制模块进行指令控制和管理,如果是“聊天”,则会进入聊天模式,如果是“音乐”,则会进入音乐模式。
12.在本发明一个较佳实施例中,所述指令控制模块对系统检测到的基础操作指令进行处理,将基础操作指令转换为对应的可执行的控制指令。
13.在本发明一个较佳实施例中,所述在线语音识别模块用于对语音获取模块获取的语音数据进行在线识别,将在线语音数据转换为文本信息,识别得到的文本信息用于人机聊天和指令关键字检测。
14.在本发明一个较佳实施例中,所述在线聊天机器人通过在线语音识别模块的数据返回应答信息,并将应答信息通过文本转语音模块向进行播放。
15.在本发明一个较佳实施例中,所述音乐播放模块用于实现音乐的播放,并对音乐进行播放循环、开始位置和音量设置。
16.本发明的有益效果是:本发明用于智能家具的基于离线模式和在线模式的语音系统,能够解决离线模式下指令关键字识别数量有限且准确性低的问题,以及人机交互效果和个性化体验差的问题。
附图说明
17.为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图,其中:
图1是本发明用于智能家具的基于离线模式和在线模式的语音系统一较佳实施例的功能模式转换图;图2是唤醒模式的工作流程图;图3是指令模式的工作流程图;图4是聊天模式的工作流程图;图5是音乐模式的工作流程图;附图中各部件的标记如下。
具体实施方式
18.下面将对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
19.实施例1,请参阅图1至图5,一种基于离线和在线双模式多功能的语音系统,该语音系统内置在电动沙发中。
20.唤醒模式是智能沙发语音系统的功能模式入口,用于检测用户的语音中是否包含唤醒词,如果包含唤醒词,则进入指令模式,否则,会一直在唤醒模式中不断进行唤醒词检测。
21.指令模式,是智能语音沙发系统的功能模式转换中枢,用于离线检测用户的关键字中是否包含指令关键字。在已识别的语音文本信息中,如果包含指令关键字,则会对不同类型的指令关键字分别进行处理,如果包含的是基础操作指令,则会进行指令的控制和管理,如果包含的是“聊天”,则会进入聊天模式,如果包含的是“音乐”,则会进入音乐模式,如果包含的是“退出”,则会返回到唤醒模式,如果不包含指令关键字,则会一直在指令模式中不断进行指令关键字的检测。
22.聊天模式,是智能语音沙发系统重要的功能模式,不仅能够实现在线的人机聊天,还能够实现在线的复杂指令关键字的准确识别,如果包含指令关键字,则会对不同类型的指令关键字分别进行处理,如果包含的是基础操作指令,则会进行指令的控制和管理,如果包含的是“音乐”,则会进入音乐模式,如果包含的是“退出”,则会返回到指令模式,如果不包含指令关键字,则会进行人机对话。
23.音乐模式,是智能语音沙发系统重要的功能模式,不仅能够实现音乐的离线播放,还能够通过指令关键字实现对音乐和沙发的控制和管理。在已识别的语音文本信息中,如果包含指令关键字,则会对不同类型的指令关键字分别进行处理,如果包含的是基础操作指令,则会进行指令的控制和管理,如果包含的是“退出”,则会返回到指令模式,如果不包含指令关键字,则会一直在音乐模式中不断进行音乐的播放。
24.当处于唤醒模式中:语音获取模块,用于对用户发出的语音信息进行实时的接收和获取,并且对接收的语音信息进行降噪处理,以提高语音识别的准确率。
25.离线语音识别模块,用于对语音获取模块获取的语音数据进行离线识别,即离线语音数据转换为文本信息。由于离线语音识别模块对于复杂长语句的识别准确率较低,所
以仅用于唤醒词的识别和简短指令关键字的识别。
26.唤醒词检测模块,用于对离线语音识别模块识别的语音文本信息进行检测,确定是否存在唤醒词,如果存在,则将预设的文本提示信息以语音的形式反馈给用户,如果不存在,则一直在唤醒模式中不断进行唤醒词的检测。
27.语音反馈模块,用于将预设的文本提示信息以语音的形式反馈给用户,提高了智能沙发语音系统的人机交互性。
28.处于指令模式中:语音获取模块,用于对用户发出的语音信息进行实时的接收和获取,并且对接收的语音信息进行降噪处理,以提高语音识别的准确率。
29.离线语音识别模块,用于对语音获取模块获取的语音数据进行离线识别,即离线语音数据转换为文本信息。由于离线语音识别模块对于复杂长语句的识别准确率较低,所以仅用于唤醒词的识别和简短指令关键字的识别。
30.指令关键字检测模块,用于对离线语音识别模块识别的语音文本进行检测,确定是否存在指令关键字,如果存在,则对检测到的不同指令关键字的类型分别进行处理,指令关键字如果是基础操作指令,则会进行相应的指令控制和管理,如果是“聊天”,则会进入聊天模式,如果是“音乐”,则会进入音乐模式。
31.指令控制模块,对系统检测到的基础操作指令进行处理,将基础操作指令转换为对应的可执行的控制指令,在电送沙发中可以通过相应的控制指令实现电动沙发的背靠、腰托、腿部等运动组件伸展、收缩、抬升和降低等功能。
32.语音反馈模块,如果在指令模式下检测到基础操作指令关键字,则系统会将已检测到的基础操作指令关键字以语音的形式反馈给用户,提示用户将进行相关的基础指令的操作,如果在指令模式下检测到“聊天”或“音乐”指令关键字,则系统会将预设的进入聊天模式或音乐模式的文本提示信息以语音的形式反馈给用户。
33.处于聊天模式中:网络检测模块,用于检测当前的网络连接状态是否满足聊天模式所需的基本条件,如果检测到网络连接成功,则会正常进入到聊天模式,如果网络连接失败,则会返回到指令模式。
34.语音获取模块,用于对用户发出的语音信息进行实时的接收和获取,并且对接收的语音信息进行降噪处理,以提高语音识别的准确率。
35.在线语音识别模块,用于对语音获取模块获取的语音数据进行在线识别,即在线语音数据转换为文本信息,识别得到的文本信息不仅用于人机聊天,而且还用于指令关键字的检测,并且对于复杂长语句的识别准确率高,可用于对复杂指令关键字的识别和检测,弥补了离线语音识别模块对于复杂长语句识别准确率低的缺点。
36.指令关键字的检测,在线指令关键字的检测不仅能够识别和检测简短的指令关键字,而且还能够准确地识别和检测复杂的指令关键字,如果检测到基础操作指令关键字,则系统会进行相关的指令控制和管理,如果检测到“音乐”指令关键字,系统会从聊天模式进入到音乐模式,如果检测到“退出”指令关键字,系统会从聊天模式退回到指令模式,聊天模式连接了指令模式和音乐模式,并且聊天模式与指令模式之间可进行相互转换,但是聊天模式与音乐模式之间的转换是单向的,即可从聊天模式进入音乐模式,而无法从音乐模式
进入聊天模式,如果没有检测到指令关键字,则系统会将识别的文本信息发送给聊天机器人;聊天机器人,会根据接收到的用户语音文本信息,返回对应的应答文本信息。该功能需要在在线条件实现,实现了文本层面的人机交互。
37.文本转语音模块,将聊天机器人返回的应答文本信息转换为语音数据并播放,实现语音层面的人机交互。
38.语音反馈模块,如果检测到网络连接成功,则系统会以语音的形式提示用户进入聊天模式,如果检测到网络连接异常,系统会将预设的网络连接异常的文本提示信息以语音的形式反馈给用户,提示用户检测当前的网络的连接状态。如果检测到当前的指令关键字是“音乐”,则系统会以语音的形式提示用户要进入音乐模式,如果检测到当前的指令关键字是“退出”,则系统会提示用户要进入指令模式。
39.指令控制模块,对系统检测到的基础操作指令进行处理,将基础操作指令转换为对应的可执行的控制指令,在电送沙发中可以通过相应的控制指令实现电动沙发的背靠、腰托、腿部等运动组件伸展、收缩、抬升和降低等功能。
40.处于音乐模式中:语音获取模块,用于对用户发出的语音信息进行实时的接收和获取,并且对接收的语音信息进行降噪处理,以提高语音识别的准确率。
41.离线语音识别模块,用于对语音获取模块获取的语音数据进行离线识别,即离线语音数据转换为文本信息。由于离线语音识别模块对于复杂长语句的识别准确率较低,所以仅用于唤醒词的识别和简短指令关键字的识别。
42.音乐播放并同步获取麦克风音频信息,在音乐播放的同时,实时地获取麦克风的音频信息,并对接收的音频数据做降噪处理,以提高离线语音识别的准确性;离线语音识别,将获取的麦克风音频数据通过离线语音识别转换为文本信息,得到的文本信息用于对指令关键字的检测;指令关键字检测,在已识别的文本信息中确认是否存在指令关键字,如果检测到基础操作指令关键字,则系统会进行相关的指令控制和管理,如果检测到“聊天”指令关键字,则系统会从指令模式进入到聊天模式,如果检测到“暂停”指令关键字,系统会暂停音乐的播放,如果检测到“继续”指令关键字,系统会继续音乐的播放,如果检测到“退出”指令关键字,系统会从音乐模式退回到指令模式,音乐模式可以与指令模式之间进行相互转换。
43.指令控制模块,对系统检测到的基础操作指令进行处理,将基础操作指令转换为对应的可执行的控制指令,在电送沙发中可以通过相应的控制指令实现电动沙发的背靠、腰托、腿部等运动组件伸展、收缩、抬升和降低等功能。
44.音乐播放模块,用于实现音乐的播放,并可对音乐进行播放循环、开始位置和音量设置。
45.音乐暂停程序,用于控制音乐的播放,中断音乐播放模块对音乐播放的执行。
46.音乐继续程序,用于控制音乐的播放,继续音乐播放模块对音乐播放的执行。
47.实施例2,一种基于离线和在线双模式多功能的语音系统,该语音系统内置在电动床中。
48.唤醒模式是智能沙发语音系统的功能模式入口,用于检测用户的语音中是否包含
唤醒词,如果包含唤醒词,则进入指令模式,否则,会一直在唤醒模式中不断进行唤醒词检测。
49.指令模式,是智能语音沙发系统的功能模式转换中枢,用于离线检测用户的关键字中是否包含指令关键字。在已识别的语音文本信息中,如果包含指令关键字,则会对不同类型的指令关键字分别进行处理,如果包含的是基础操作指令,则会进行指令的控制和管理,如果包含的是“聊天”,则会进入聊天模式,如果包含的是“音乐”,则会进入音乐模式,如果包含的是“退出”,则会返回到唤醒模式,如果不包含指令关键字,则会一直在指令模式中不断进行指令关键字的检测。
50.聊天模式,是智能语音沙发系统重要的功能模式,不仅能够实现在线的人机聊天,还能够实现在线的复杂指令关键字的准确识别,如果包含指令关键字,则会对不同类型的指令关键字分别进行处理,如果包含的是基础操作指令,则会进行指令的控制和管理,如果包含的是“音乐”,则会进入音乐模式,如果包含的是“退出”,则会返回到指令模式,如果不包含指令关键字,则会进行人机对话。
51.音乐模式,是智能语音沙发系统重要的功能模式,不仅能够实现音乐的离线播放,还能够通过指令关键字实现对音乐和沙发的控制和管理。在已识别的语音文本信息中,如果包含指令关键字,则会对不同类型的指令关键字分别进行处理,如果包含的是基础操作指令,则会进行指令的控制和管理,如果包含的是“退出”,则会返回到指令模式,如果不包含指令关键字,则会一直在音乐模式中不断进行音乐的播放。
52.当处于唤醒模式中:语音获取模块,用于对用户发出的语音信息进行实时的接收和获取,并且对接收的语音信息进行降噪处理,以提高语音识别的准确率。
53.离线语音识别模块,用于对语音获取模块获取的语音数据进行离线识别,即离线语音数据转换为文本信息。由于离线语音识别模块对于复杂长语句的识别准确率较低,所以仅用于唤醒词的识别和简短指令关键字的识别。
54.唤醒词检测模块,用于对离线语音识别模块识别的语音文本信息进行检测,确定是否存在唤醒词,如果存在,则将预设的文本提示信息以语音的形式反馈给用户,如果不存在,则一直在唤醒模式中不断进行唤醒词的检测。
55.语音反馈模块,用于将预设的文本提示信息以语音的形式反馈给用户,提高了智能沙发语音系统的人机交互性。
56.处于指令模式中:语音获取模块,用于对用户发出的语音信息进行实时的接收和获取,并且对接收的语音信息进行降噪处理,以提高语音识别的准确率。
57.离线语音识别模块,用于对语音获取模块获取的语音数据进行离线识别,即离线语音数据转换为文本信息。由于离线语音识别模块对于复杂长语句的识别准确率较低,所以仅用于唤醒词的识别和简短指令关键字的识别。
58.指令关键字检测模块,用于对离线语音识别模块识别的语音文本进行检测,确定是否存在指令关键字,如果存在,则对检测到的不同指令关键字的类型分别进行处理,指令关键字如果是基础操作指令,则会进行相应的指令控制和管理,如果是“聊天”,则会进入聊天模式,如果是“音乐”,则会进入音乐模式。
59.指令控制模块,对系统检测到的基础操作指令进行处理,将基础操作指令转换为对应的可执行的控制指令,在电送床中可以通过相应的控制指令实现电动床的背靠和床板等运动组件伸展、收缩、抬升和降低等功能。
60.语音反馈模块,如果在指令模式下检测到基础操作指令关键字,则系统会将已检测到的基础操作指令关键字以语音的形式反馈给用户,提示用户将进行相关的基础指令的操作,如果在指令模式下检测到“聊天”或“音乐”指令关键字,则系统会将预设的进入聊天模式或音乐模式的文本提示信息以语音的形式反馈给用户。
61.处于聊天模式中:网络检测模块,用于检测当前的网络连接状态是否满足聊天模式所需的基本条件,如果检测到网络连接成功,则会正常进入到聊天模式,如果网络连接失败,则会返回到指令模式。
62.语音获取模块,用于对用户发出的语音信息进行实时的接收和获取,并且对接收的语音信息进行降噪处理,以提高语音识别的准确率。
63.在线语音识别模块,用于对语音获取模块获取的语音数据进行在线识别,即在线语音数据转换为文本信息,识别得到的文本信息不仅用于人机聊天,而且还用于指令关键字的检测,并且对于复杂长语句的识别准确率高,可用于对复杂指令关键字的识别和检测,弥补了离线语音识别模块对于复杂长语句识别准确率低的缺点。
64.指令关键字的检测,在线指令关键字的检测不仅能够识别和检测简短的指令关键字,而且还能够准确地识别和检测复杂的指令关键字,如果检测到基础操作指令关键字,则系统会进行相关的指令控制和管理,如果检测到“音乐”指令关键字,系统会从聊天模式进入到音乐模式,如果检测到“退出”指令关键字,系统会从聊天模式退回到指令模式,聊天模式连接了指令模式和音乐模式,并且聊天模式与指令模式之间可进行相互转换,但是聊天模式与音乐模式之间的转换是单向的,即可从聊天模式进入音乐模式,而无法从音乐模式进入聊天模式,如果没有检测到指令关键字,则系统会将识别的文本信息发送给聊天机器人;聊天机器人,会根据接收到的用户语音文本信息,返回对应的应答文本信息。该功能需要在在线条件实现,实现了文本层面的人机交互。
65.文本转语音模块,将聊天机器人返回的应答文本信息转换为语音数据并播放,实现语音层面的人机交互。
66.语音反馈模块,如果检测到网络连接成功,则系统会以语音的形式提示用户进入聊天模式,如果检测到网络连接异常,系统会将预设的网络连接异常的文本提示信息以语音的形式反馈给用户,提示用户检测当前的网络的连接状态。如果检测到当前的指令关键字是“音乐”,则系统会以语音的形式提示用户要进入音乐模式,如果检测到当前的指令关键字是“退出”,则系统会提示用户要进入指令模式。
67.指令控制模块,对系统检测到的基础操作指令进行处理,将基础操作指令转换为对应的可执行的控制指令,在电送床中可以通过相应的控制指令实现电动床的背靠和床板等运动组件伸展、收缩、抬升和降低等功能。
68.处于音乐模式中:语音获取模块,用于对用户发出的语音信息进行实时的接收和获取,并且对接收
的语音信息进行降噪处理,以提高语音识别的准确率。
69.离线语音识别模块,用于对语音获取模块获取的语音数据进行离线识别,即离线语音数据转换为文本信息。由于离线语音识别模块对于复杂长语句的识别准确率较低,所以仅用于唤醒词的识别和简短指令关键字的识别。
70.音乐播放并同步获取麦克风音频信息,在音乐播放的同时,实时地获取麦克风的音频信息,并对接收的音频数据做降噪处理,以提高离线语音识别的准确性;离线语音识别,将获取的麦克风音频数据通过离线语音识别转换为文本信息,得到的文本信息用于对指令关键字的检测;指令关键字检测,在已识别的文本信息中确认是否存在指令关键字,如果检测到基础操作指令关键字,则系统会进行相关的指令控制和管理,如果检测到“聊天”指令关键字,则系统会从指令模式进入到聊天模式,如果检测到“暂停”指令关键字,系统会暂停音乐的播放,如果检测到“继续”指令关键字,系统会继续音乐的播放,如果检测到“退出”指令关键字,系统会从音乐模式退回到指令模式,音乐模式可以与指令模式之间进行相互转换。
71.指令控制模块,对系统检测到的基础操作指令进行处理,将基础操作指令转换为对应的可执行的控制指令,在电送床中可以通过相应的控制指令实现电动床的背靠和床板等运动组件伸展、收缩、抬升和降低等功能。
72.音乐播放模块,用于实现音乐的播放,并可对音乐进行播放循环、开始位置和音量设置。
73.音乐暂停程序,用于控制音乐的播放,中断音乐播放模块对音乐播放的执行。
74.音乐继续程序,用于控制音乐的播放,继续音乐播放模块对音乐播放的执行。
75.区别于现有技术,本发明针对单一离线模式下对于复杂指令关键字识别准确率低的问题,以及现有的智能语音沙发功能模式单一的问题,提出了基于离线和在线相结合的双连接模式和唤醒模式、指令模式、聊天模式和音乐模式多功能模式的智能语音沙发系统,不仅实现对于复杂指令关键字的准确识别,而且还丰富了智能语音家具的功能模式。通过将智能语音技术和功能家具紧密结合,提高了智能语音家具的人机交互性,并且给用户带来了更好的个性化体验。
76.以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书内容所作的等效结构或等效流程变换,或直接或间接运用在其它相关的技术领域,均同理包括在本发明的专利保护范围内。