1.mediapipeԴ??
mediapipeԴ??
借助TensorFlow Lite和MediaPipe,谷歌开源了一款手势识别器,可以直接在手机上运行,实时跟踪,并且已经开源。消防源码
这款应用被称为“Hand Tracking GPU”,vimium源码在安卓端有对应的apk安装包,iOS用户可以下载源代码自行编译。
App默认调用前置摄像头,若屏幕中出现的是使用者的脸,App则不会反应。使用者伸手到屏幕前,可以识别出手部的tracepath 源码各种姿势,如数字1-9和“OK”、“点赞”手势。然而,有时App会出现“放空”现象,onviftest 源码只能看到手,无法识别手势,此问题在推特上被提及。
值得注意的sourcetree源码是,该App只支持一只手的手势识别,若同时将两只手放在摄像头前,只能识别一只手。因此,石头剪刀布等需要两只手配合的游戏无法实现。
这款应用背后有三个模型支持:BlazePalm模型从整个图像中界定手部轮廓,Hand Landmark模型负责定位关键点,提供个关节坐标,而Gesture Recognition模型则在手部关键点检测结果的基础上,识别比划出的手势。
MediaPipe框架被用于实现这一应用,它是一个构建机器学习pipeline的框架,用于手势识别的MediaPipe图覆盖了从拍摄到结果输出的全过程。借助MediaPipe,除了手势识别,还支持人脸检测、头发分割和物体检测。
开发者可以访问相应链接获取更多内容和资料。