基于多模态融合身份认证的智慧社区导航方法及相关装置与流程

本发明涉及社区安全，尤其涉及一种基于多模态融合身份认证的智慧社区导航方法及相关装置。

背景技术：

1、在现在的社区管理中，一般都是由门卫对到访用户进行身份的核验，然后在核验身份通过之后，允许对应的到访用户进入社区；或者由业主自己到社区门口接到访用户进入社区，并且在通过门卫对到访用户的身份的核验时，可能会出现核验不严格导致核验错误，导致可能存在安全隐患，同时需要较大的配备相应的人力资源，并且在访问用户进去社区之后，也可能因为道路复杂无法第一时间找到所需要访问的目标地址。

技术实现思路

1、本发明的目的在于克服现有技术的不足，本发明提供了一种基于多模态融合身份认证的智慧社区导航方法及相关装置，保证智慧社区的访问安全，同时为访问用户提供导航。

2、为了解决上述技术问题，本发明实施例提供了一种基于多模态融合身份认证的智慧社区导航方法，所述方法包括：

3、访问用户在到达智慧社区门口时，智能终端基于扫描设置在智慧社区门口的二维码的方式加载信息输入页面；

4、所述访问用户基于所述信息输入页面输入所述访问用户的用户标识及至少两种指定生物特征数据，所述至少两种指定生物特征数据包括人脸特征图像数据和语音特征数据；

5、分别对至少两种指定生物特征数据中的人脸特征图像数据和语音特征数据进行特征提取处理，获得人脸特征数据和声纹特征数据；

6、基于预设特征融合算法将所述人脸特征数据和所述声纹特征数据进行特征融合处理，获得融合特征数据；

7、基于所述用户标识索引到留存融合特征数据与所述融合特征数据进行身份认证决策处理，并根据身份认证决策结果获得所述访问用户的目标地址；

8、根据所述访问用户的当前位置信息和所述目标地址生成智慧社区的导航路径。

9、可选的，所述智能终端基于扫描设置在智慧社区门口的二维码的方式加载信息输入页面，包括：

10、所述智能终端扫描预设在所述智慧社区门口的二维码获得所述信息输入页面的链接地址；

11、所述智能终端基于所述链接地址加载所述信息输入页面。

12、可选的，所述访问用户基于所述信息输入页面输入所述访问用户的用户标识及至少两种指定生物特征数据，包括：

13、所述访问用户在所述信息输入页面上的指定位置输入访问用户的用户标识；以及，

14、所述访问用户基于所述信息输入页面输入至少两种指定生物特征数据，并将所述用户标识与所述至少两种指定生物特征数据进行绑定，其中在语音特征数据输入时，所述信息输入页面指定所述访问用户朗读对象，并启动所述智能终端的语音采集设备进行语音特征数据采集处理，获得所述语音特征数据。

15、可选的，所述分别对至少两种指定生物特征数据中的人脸特征图像数据和语音特征数据进行特征提取处理，获得人脸特征数据和语音特征数据，包括：

16、基于密集连接网络对所述人脸特征图像数据进行特征提取处理，获得人脸特征数据；

17、基于深度神经网络编码的x-vector模型对所述语音特征数据进行声纹特征提取处理，获得声纹特征数据。

18、可选的，所述基于预设特征融合算法将所述人脸特征数据和所述声纹特征数据进行特征融合处理，包括：

19、利用级联融合函数对所述人脸特征数据和所述声纹特征数据进行融合处理，并将融合处理结果进行堆叠并池化，获得融合特征数据。

20、可选的，所述基于所述用户标识索引到留存融合特征数据与所述融合特征数据进行身份认证决策处理，并根据身份认证决策结果获得所述访问用户的目标地址，包括：

21、基于所述用户标识在融合特征留存数据库中进行检索索引操作，获得所述用户标识索引到留存融合特征数据；

22、基于贝叶斯决策算法利用所述用户标识索引到留存融合特征数据与所述融合特征数据进行身份认证决策处理，获得身份认证决策结果；

23、在所述身份认证决策结果为认证通过时，基于所述用户标识索引处理获得所述访问用户的目标地址。

24、可选的，所述根据所述访问用户的当前位置信息和所述目标地址生成智慧社区的导航路径，包括：

25、基于所述智能终端的定位处理获得所述访问用户的当前位置信息；

26、基于所述当前位置信息和所述目标地址生成智慧社区的导航路径。

27、另外，本发明实施例还提供了一种基于多模态融合身份认证的智慧社区导航装置，所述装置包括：

28、扫描模块：用于访问用户在到达智慧社区门口时，智能终端基于扫描设置在智慧社区门口的二维码的方式加载信息输入页面；

29、特征输入模块：用于所述访问用户基于所述信息输入页面输入所述访问用户的用户标识及至少两种指定生物特征数据，所述至少两种指定生物特征数据包括人脸特征图像数据和语音特征数据；

30、特征提取模块：用于分别对至少两种指定生物特征数据中的人脸特征图像数据和语音特征数据进行特征提取处理，获得人脸特征数据和声纹特征数据；

31、特征融合模块：用于基于预设特征融合算法将所述人脸特征数据和所述声纹特征数据进行特征融合处理，获得融合特征数据；

32、身份认证决策模块：用于基于所述用户标识索引到留存融合特征数据与所述融合特征数据进行身份认证决策处理，并根据身份认证决策结果获得所述访问用户的目标地址；

33、导航路径生成模块：用于根据所述访问用户的当前位置信息和所述目标地址生成智慧社区的导航路径。

34、另外，本发明实施例还提供了一种智能终端，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述中任一项所述方法的步骤。

35、另外，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述中任一项所述方法的步骤。

36、在本发明实施例中，通过采集访问用户的至少两种生物特征信息，并提取对应的特征数据并进行融合，然后将融合特征数据与访问用户的留存融合特征数据进行决策认证，然后再根据当前位置信息和目标地址生成导航路径；保证智慧社区的访问安全，同时为访问用户提供导航。

技术特征：

1.一种基于多模态融合身份认证的智慧社区导航方法，其特征在于，所述方法包括：

2.根据权利要求1所述的智慧社区导航方法，其特征在于，所述智能终端基于扫描设置在智慧社区门口的二维码的方式加载信息输入页面，包括：

3.根据权利要求1所述的智慧社区导航方法，其特征在于，所述访问用户基于所述信息输入页面输入所述访问用户的用户标识及至少两种指定生物特征数据，包括：

4.根据权利要求1所述的智慧社区导航方法，其特征在于，所述分别对至少两种指定生物特征数据中的人脸特征图像数据和语音特征数据进行特征提取处理，获得人脸特征数据和语音特征数据，包括：

5.根据权利要求1所述的智慧社区导航方法，其特征在于，所述基于预设特征融合算法将所述人脸特征数据和所述声纹特征数据进行特征融合处理，包括：

6.根据权利要求1所述的智慧社区导航方法，其特征在于，所述基于所述用户标识索引到留存融合特征数据与所述融合特征数据进行身份认证决策处理，并根据身份认证决策结果获得所述访问用户的目标地址，包括：

7.根据权利要求1所述的智慧社区导航方法，其特征在于，所述根据所述访问用户的当前位置信息和所述目标地址生成智慧社区的导航路径，包括：

8.一种基于多模态融合身份认证的智慧社区导航装置，其特征在于，所述装置包括：

9.一种智能终端，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述方法的步骤。

技术总结
本发明公开了一种基于多模态融合身份认证的智慧社区导航方法及相关装置，其中所述方法包括：智能终端基于扫描设置在智慧社区门口的二维码的方式加载信息输入页面；访问用户基于所述信息输入页面输入所述访问用户的用户标识及至少两种指定生物特征数据；分别对至少两种指定生物特征数据中的人脸特征图像数据和语音特征数据进行特征提取处理；将人脸特征数据和声纹特征数据进行特征融合处理；基于用户标识索引到留存融合特征数据与融合特征数据进行身份认证决策处理，并获得访问用户的目标地址；根据访问用户的当前位置信息和目标地址生成智慧社区的导航路径。在本发明实施例中，保证智慧社区的访问安全，同时为访问用户提供导航。

技术研发人员：韩冠亚,李苗,苏志宏,冀玮
受保护的技术使用者：佛山市顺德区智慧科技产业创新研究院
技术研发日：
技术公布日：2024/9/23