无声胜有声——聋哑人无障碍交互智能家居系统

 随着科技的发展，智能家居普及，但聋哑人难以享受这些。在智能家居逐渐普及的当下，语音交互控制的广泛应用，其便利性极大地提升了用户体验感，是科技造福人类的具体体现之一。但这一科技红利对于特殊人群——聋哑人来说，却是难以享受的。针对此，本项目设计一套针对聋哑人群体的软硬件一体化系统，使得聋哑人能以手势识别方式代替语音识别，进而控制智能家居，实现无声胜有声，让特殊群体也能轻松自如地控制智能家居系统。本系统能支持多达十几种单一指令，也可以实现指令组合，实现数十种指令操作效果，满足对常规智能家居各单元的控制，其响应速度之快，甚至在体验效果上超越了语音控制。即使是非聋哑人，在熟练掌握手势指令用法后，也会在特定的应用场景下，优先选择使用本系统，而非使用语音交互控制。此项目是一套针对聋哑人群体的软硬件，可以让聋哑人轻松控制智能家居。此项目首先会通过摄像头捕获手势，然后利用YCbCr空间，确定肤色，接着对检测到的轮廓进行提取和灰度处理。之后Blaze Palm可以高精度返回手部关键点，手势创建模型。最后Media Pipe会推算并匹配手势代表数值并演算出结果。