手语翻译系统、手语翻译装置及手语翻译方法
专利名称：手语翻译系统、手语翻译装置及手语翻译方法
技术领域：
本发明涉及一种手语翻译系统、手语翻译装置及手语翻译方法。
背景技术：
通常正常人与聋哑人士沟通时需要学习一套手语，手语的学习需要花费相当大的精力及相当长的时间。另外，大多数手语的表达方式因国籍或地区的不同而不同，故不同国籍或地区的聋哑人士相互进行交流也存在沟通的问题。
发明内容
鉴于以上内容，有必要提供一种可对手语进行识别并将手语所表达的意思转换为·文字或语音信息的手语翻译系统、手语翻译装置及手语翻译方法。一种手语翻译系统，包括
一存储单元，用于存储标准手语的三维模型及与标准手语的三维模型对应的文字信
息；
一三维模型建立模块，用于根据由一深度摄像机对手势进行拍摄得到的图像及拍摄场景内各点与深度摄像机之间的距离信息建立该手势的三维模型；
一转换模块，用于根据该存储单元中的标准手语的三维模型将得到的手势的三维模型转换为对应的标准手语的三维模型；及
一手语翻译模块，用于根据该转换模块得到的标准手语的三维模型及该存储单元中的文字信息将由该转换模块得到的标准手语的三维模型转换为对应的文字信息，该对应的文字信息通过一第一输出单元进行显示。一种手语翻译装置，包括
一深度摄像机，用于拍摄交流者进行手语表达时所作出的手势并得到手势的图像及被摄场景内各点与深度摄像机之间的距离信息；
一手语翻译系统，该手语翻译系统内存储有标准手语的三维模型及与标准手语的三维模型对应的文字信息，该手语翻译系统用于根据由深度摄像机所得到的图像及距离信息得到手势的三维模型，并将得到的手势的三维模型根据存储的标准手语的三维模型转换为对应的标准手语的三维模型，还根据存储的标准手语的三维模型及其对应的文字信息将标准手语的三维模型转换为对应的文字信息；及
至少一输出单元，用于输出该手语翻译系统的文字信息。一种手语翻译方法，包括以下步骤
根据由一深度摄像机对手势进行拍摄得到的图像及拍摄场景内各点与深度摄像机之间的距离信息建立该手势的三维模型；
将得到的手势的三维模型转换为对应的标准手语的三维模型；
将标准手语的三维模型转换为对应的文字信息；以及 输出该文字信息。
上述手语翻译系统、手语翻译装置及手语翻译方法通过对深度摄像机得到的手势的图像及距离信息建立手势的三维模型，之后通过转换模块将得到的手势的三维模型转换为对应的标准手语的三维模型，该手语翻译模块将标准手语的三维模型转换为对应的文字信息，该输出单元输出文字信息，从而对手语进行识别并将手语所表达的意思转换为对应的文字或语音信息，方便与聋哑人士进行交流。
图I是本发明手语翻译装置的较佳实施方式的方框图。图2是本发明手语翻译装置的立体图。图3是图2中手语翻译装置的反面示意图。
图4是本发明手语翻译装置的另一较佳实施方式的立体图。图5是本发明手语翻译方法的较佳实施方式的流程图。主要元件符号说明
权利要求
1.一种手语翻译系统，包括 一存储单元，用于存储标准手语的三维模型及与标准手语的三维模型对应的文字信息； 一三维模型建立模块，用于根据由一深度摄像机对手势进行拍摄得到的图像及拍摄场景内各点与深度摄像机之间的距离信息建立该手势的三维模型； 一转换模块，用于根据该存储单元中的标准手语的三维模型将得到的手势的三维模型转换为对应的标准手语的三维模型；及 一手语翻译模块，用于根据该转换模块得到的标准手语的三维模型及该存储单元中的文字信息将由该转换模块得到的标准手语的三维模型转换为对应的文字信息，该对应的文字信息通过一第一输出单元进行显示。
2.如权利要求I所述的手语翻译系统，其特征在于该手语翻译系统还包括一手语体系设定模块，该手语体系设定模块用于设定手语翻译系统的手语体系。
3.如权利要求I所述的手语翻译系统，其特征在于该手语翻译系统还包括一手语体系识别模块，当使用者未设定该手语翻译系统的手语体系时，该手语体系识别模块根据交流者已做出的手势判断交流者使用的手语体系，从而对应设定该手语翻译系统的手语体系O
4.如权利要求I所述的手语翻译系统，其特征在于该存储单元还存储有与文字信息对应的语音信息，该手语翻译系统还包括一文字转语音模块，该文字转语音模块根据手语翻译模块输出的文字信息及存储单元中的语音信息将该手语翻译模块输出的文字信息转换为对应的语音信息，该对应的文字信息通过一第二输出单元进行显示。
5.一种手语翻译装置，包括 一深度摄像机，用于拍摄交流者进行手语表达时所作出的手势并得到手势的图像及被摄场景内各点与深度摄像机之间的距离信息； 一手语翻译系统，该手语翻译系统存储有标准手语的三维模型及与标准手语的三维模型对应的文字信息，该手语翻译系统用于根据由深度摄像机所得到的图像及距离信息得到手势的三维模型，并将得到的手势的三维模型根据存储的标准手语的三维模型转换为对应的标准手语的三维模型，还根据存储的标准手语的三维模型及其对应的文字信息将标准手语的三维模型转换为对应的文字信息；及 至少一输出单元，用于输出该手语翻译系统的文字信息。
6.如权利要求5所述的手语翻译装置，其特征在于该手语翻译装置还包括一按键，该手语翻译系统还用于通过该按键设定手语翻译装置的手语体系。
7.如权利要求6所述的手语翻译装置，其特征在于该手语翻译系统包括一存储单元、一三维模型建立模块、一转换模块及一手语翻译模块，该存储单元用于存储标准手语的三维模型及与标准手语的三维模型对应的文字信息，该三维模型建立模块用于根据该深度摄像机得到的图像及距离信息建立该手势的三维模型，该转换模块用于根据存储单元中的标准手语的三维模型将得到的手势的三维模型转换为对应的标准手语的三维模型，该手语翻译模块根据转换模块的标准手语的三维模型及存储单元中的文字信息将该转换模块得到的标准手语的三维模型转换为对应的文字信息。
8.如权利要求7所述的手语翻译装置，其特征在于该手语翻译系统还包括一手语体系设定模块，当使用者按压该按键时，该手语体系设定模块即对应设定该手语翻译装置的手语体系。
9.如权利要求8所述的手语翻译装置，其特征在于该手语翻译系统还包括一手语体系识别模块，当使用者未设定该手语翻译装置的手语体系时，该手语体系识别模块根据交流者已做出的手势判断交流者使用的手语体系，从而对应设定该手语翻译装置的手语体系O
10.如权利要求7所述的手语翻译装置，其特征在于该手语翻译系统的存储单元还存储有与文字信息对应的语音信息，该手语翻译系统还用于根据该手语翻译模块输出的文字信息及该存储单元中的语音信息将该文字信息转换为对应的语音信息。
11.如权利要求10所述的手语翻译装置，其特征在于该手语翻译系统还包括一文字转语音模块，该手语翻译系统通过该文字转语音模块将该文字信息转换为对应的语音信肩、O
12.如权利要求11所述的手语翻译装置，其特征在于该输出单元为一耳机，用于发出该文字转语音模块输出的语音信息。
13.如权利要求5所述的手语翻译装置，其特征在于该输出单元为一显示屏，用于显示该手语翻译模块输出的文字信息。
14.一种手语翻译方法，包括以下步骤 根据由一深度摄像机对手势进行拍摄得到的图像及拍摄场景内各点与深度摄像机之间的距离信息建立该手势的三维模型； 将得到的手势的三维模型转换为对应的标准手语的三维模型； 将标准手语的三维模型转换为对应的文字信息；以及 输出该文字信息。
15.如权利要求14所述的手语翻译方法，其特征在于该手语翻译方法还包括 判断是否需要人工设定一手语翻译系统的手语体系； 若需要人工设定手语体系，则进行人工设定手语体系；以及 若不需要人工设定手语体系，该手语翻译系统则自动设定其手语体系。
16.如权利要求14所述的手语翻译方法，其特征在于该手语翻译方法还包括 将转换得到的文字信息转换为对应的语音信息；以及 发出该语音信息。
全文摘要
一种手语翻译装置包括一深度摄像机、一手语翻译装置及输出单元。深度摄像机拍摄交流者所作出的手势。手语翻译装置包括一三维模型建立模块、一存储单元、一转换模块及一手语翻译模块，三维模型建立模块建立手势的三维模型，存储单元存储标准手语的三维模型及与标准手语的三维模型对应的文字信息，转换模块将得到的手势的三维模型像转换为标准手语的三维模型，手语翻译模块将标准手语的三维模型转换为文字信息，输出单元输出文字信息。本发明还提供了一种手语翻译系统及方法。
文档编号G09B21/00GK102956132SQ20111024573
公开日2013年3月6日 申请日期2011年8月25日 优先权日2011年8月25日
发明者李后贤, 李章荣, 罗治平 申请人:鸿富锦精密工业(深圳)有限公司, 鸿海精密工业股份有限公司
技术领域：
本发明涉及一种手语翻译系统、手语翻译装置及手语翻译方法。
背景技术：
通常正常人与聋哑人士沟通时需要学习一套手语，手语的学习需要花费相当大的精力及相当长的时间。另外，大多数手语的表达方式因国籍或地区的不同而不同，故不同国籍或地区的聋哑人士相互进行交流也存在沟通的问题。
发明内容
鉴于以上内容，有必要提供一种可对手语进行识别并将手语所表达的意思转换为·文字或语音信息的手语翻译系统、手语翻译装置及手语翻译方法。一种手语翻译系统，包括
一存储单元，用于存储标准手语的三维模型及与标准手语的三维模型对应的文字信
息；
一三维模型建立模块，用于根据由一深度摄像机对手势进行拍摄得到的图像及拍摄场景内各点与深度摄像机之间的距离信息建立该手势的三维模型；
一转换模块，用于根据该存储单元中的标准手语的三维模型将得到的手势的三维模型转换为对应的标准手语的三维模型；及
一手语翻译模块，用于根据该转换模块得到的标准手语的三维模型及该存储单元中的文字信息将由该转换模块得到的标准手语的三维模型转换为对应的文字信息，该对应的文字信息通过一第一输出单元进行显示。一种手语翻译装置，包括
一深度摄像机，用于拍摄交流者进行手语表达时所作出的手势并得到手势的图像及被摄场景内各点与深度摄像机之间的距离信息；
一手语翻译系统，该手语翻译系统内存储有标准手语的三维模型及与标准手语的三维模型对应的文字信息，该手语翻译系统用于根据由深度摄像机所得到的图像及距离信息得到手势的三维模型，并将得到的手势的三维模型根据存储的标准手语的三维模型转换为对应的标准手语的三维模型，还根据存储的标准手语的三维模型及其对应的文字信息将标准手语的三维模型转换为对应的文字信息；及
至少一输出单元，用于输出该手语翻译系统的文字信息。一种手语翻译方法，包括以下步骤
根据由一深度摄像机对手势进行拍摄得到的图像及拍摄场景内各点与深度摄像机之间的距离信息建立该手势的三维模型；
将得到的手势的三维模型转换为对应的标准手语的三维模型；
将标准手语的三维模型转换为对应的文字信息；以及 输出该文字信息。
上述手语翻译系统、手语翻译装置及手语翻译方法通过对深度摄像机得到的手势的图像及距离信息建立手势的三维模型，之后通过转换模块将得到的手势的三维模型转换为对应的标准手语的三维模型，该手语翻译模块将标准手语的三维模型转换为对应的文字信息，该输出单元输出文字信息，从而对手语进行识别并将手语所表达的意思转换为对应的文字或语音信息，方便与聋哑人士进行交流。
图I是本发明手语翻译装置的较佳实施方式的方框图。图2是本发明手语翻译装置的立体图。图3是图2中手语翻译装置的反面示意图。
图4是本发明手语翻译装置的另一较佳实施方式的立体图。图5是本发明手语翻译方法的较佳实施方式的流程图。主要元件符号说明
权利要求
1.一种手语翻译系统，包括 一存储单元，用于存储标准手语的三维模型及与标准手语的三维模型对应的文字信息； 一三维模型建立模块，用于根据由一深度摄像机对手势进行拍摄得到的图像及拍摄场景内各点与深度摄像机之间的距离信息建立该手势的三维模型； 一转换模块，用于根据该存储单元中的标准手语的三维模型将得到的手势的三维模型转换为对应的标准手语的三维模型；及 一手语翻译模块，用于根据该转换模块得到的标准手语的三维模型及该存储单元中的文字信息将由该转换模块得到的标准手语的三维模型转换为对应的文字信息，该对应的文字信息通过一第一输出单元进行显示。
2.如权利要求I所述的手语翻译系统，其特征在于该手语翻译系统还包括一手语体系设定模块，该手语体系设定模块用于设定手语翻译系统的手语体系。
3.如权利要求I所述的手语翻译系统，其特征在于该手语翻译系统还包括一手语体系识别模块，当使用者未设定该手语翻译系统的手语体系时，该手语体系识别模块根据交流者已做出的手势判断交流者使用的手语体系，从而对应设定该手语翻译系统的手语体系O
4.如权利要求I所述的手语翻译系统，其特征在于该存储单元还存储有与文字信息对应的语音信息，该手语翻译系统还包括一文字转语音模块，该文字转语音模块根据手语翻译模块输出的文字信息及存储单元中的语音信息将该手语翻译模块输出的文字信息转换为对应的语音信息，该对应的文字信息通过一第二输出单元进行显示。
5.一种手语翻译装置，包括 一深度摄像机，用于拍摄交流者进行手语表达时所作出的手势并得到手势的图像及被摄场景内各点与深度摄像机之间的距离信息； 一手语翻译系统，该手语翻译系统存储有标准手语的三维模型及与标准手语的三维模型对应的文字信息，该手语翻译系统用于根据由深度摄像机所得到的图像及距离信息得到手势的三维模型，并将得到的手势的三维模型根据存储的标准手语的三维模型转换为对应的标准手语的三维模型，还根据存储的标准手语的三维模型及其对应的文字信息将标准手语的三维模型转换为对应的文字信息；及 至少一输出单元，用于输出该手语翻译系统的文字信息。
6.如权利要求5所述的手语翻译装置，其特征在于该手语翻译装置还包括一按键，该手语翻译系统还用于通过该按键设定手语翻译装置的手语体系。
7.如权利要求6所述的手语翻译装置，其特征在于该手语翻译系统包括一存储单元、一三维模型建立模块、一转换模块及一手语翻译模块，该存储单元用于存储标准手语的三维模型及与标准手语的三维模型对应的文字信息，该三维模型建立模块用于根据该深度摄像机得到的图像及距离信息建立该手势的三维模型，该转换模块用于根据存储单元中的标准手语的三维模型将得到的手势的三维模型转换为对应的标准手语的三维模型，该手语翻译模块根据转换模块的标准手语的三维模型及存储单元中的文字信息将该转换模块得到的标准手语的三维模型转换为对应的文字信息。
8.如权利要求7所述的手语翻译装置，其特征在于该手语翻译系统还包括一手语体系设定模块，当使用者按压该按键时，该手语体系设定模块即对应设定该手语翻译装置的手语体系。
9.如权利要求8所述的手语翻译装置，其特征在于该手语翻译系统还包括一手语体系识别模块，当使用者未设定该手语翻译装置的手语体系时，该手语体系识别模块根据交流者已做出的手势判断交流者使用的手语体系，从而对应设定该手语翻译装置的手语体系O
10.如权利要求7所述的手语翻译装置，其特征在于该手语翻译系统的存储单元还存储有与文字信息对应的语音信息，该手语翻译系统还用于根据该手语翻译模块输出的文字信息及该存储单元中的语音信息将该文字信息转换为对应的语音信息。
11.如权利要求10所述的手语翻译装置，其特征在于该手语翻译系统还包括一文字转语音模块，该手语翻译系统通过该文字转语音模块将该文字信息转换为对应的语音信肩、O
12.如权利要求11所述的手语翻译装置，其特征在于该输出单元为一耳机，用于发出该文字转语音模块输出的语音信息。
13.如权利要求5所述的手语翻译装置，其特征在于该输出单元为一显示屏，用于显示该手语翻译模块输出的文字信息。
14.一种手语翻译方法，包括以下步骤 根据由一深度摄像机对手势进行拍摄得到的图像及拍摄场景内各点与深度摄像机之间的距离信息建立该手势的三维模型； 将得到的手势的三维模型转换为对应的标准手语的三维模型； 将标准手语的三维模型转换为对应的文字信息；以及 输出该文字信息。
15.如权利要求14所述的手语翻译方法，其特征在于该手语翻译方法还包括 判断是否需要人工设定一手语翻译系统的手语体系； 若需要人工设定手语体系，则进行人工设定手语体系；以及 若不需要人工设定手语体系，该手语翻译系统则自动设定其手语体系。
16.如权利要求14所述的手语翻译方法，其特征在于该手语翻译方法还包括 将转换得到的文字信息转换为对应的语音信息；以及 发出该语音信息。
全文摘要
一种手语翻译装置包括一深度摄像机、一手语翻译装置及输出单元。深度摄像机拍摄交流者所作出的手势。手语翻译装置包括一三维模型建立模块、一存储单元、一转换模块及一手语翻译模块，三维模型建立模块建立手势的三维模型，存储单元存储标准手语的三维模型及与标准手语的三维模型对应的文字信息，转换模块将得到的手势的三维模型像转换为标准手语的三维模型，手语翻译模块将标准手语的三维模型转换为文字信息，输出单元输出文字信息。本发明还提供了一种手语翻译系统及方法。
文档编号G09B21/00GK102956132SQ20111024573
公开日2013年3月6日 申请日期2011年8月25日 优先权日2011年8月25日
发明者李后贤, 李章荣, 罗治平 申请人:鸿富锦精密工业(深圳)有限公司, 鸿海精密工业股份有限公司
最新回复(0)