手势交互 - 愤怒小鸟

这是一个创新的游戏交互系统，通过计算机视觉技术实现了对经典愤怒小鸟游戏的隔空手势操控。系统突破了传统触摸屏的限制，让玩家可以通过自然手势完成游戏中的所有操作，包括瞄准、弹射等核心动作。

示例代码

下载链接 [http://114.215.174.132:8082/s/7QEaYo8CR5DnPBw]

系统组成

1.输入层：RGB 摄像头

2.处理层：

• CJCS 手部特征点检测模块
• 手形分类
• 手势识别

3.输出层：愤怒小鸟游戏 -20250826

可从“游戏工坊”下载游戏

核心技术实现

1.采用 CJCS 开发者中心的轻量化手部特征点检测模型，在 RGB 图像分辨率下实现 21 个关键点的实时检测。

2.手形分类

通过提取手部 21 特征点 2d 坐标，根据手部框的信息对关键点坐标进行归一化处理，根据 0 号点到 9 号点的角度将归一化后的关键点转正，新建一张灰色背景图像，将处理后的 21 点坐标按照手部连线规则画在背景图上，得到手部骨架图。采集不同手形类别的数据集，训练分类网络，实现手形特征分类。

3.手势识别

识别三种手势：掌变拳、拳变掌、拳移动，与游戏进行交互。

项目亮点

1. ‌创新交互方式‌：完全摆脱物理接触限制
2. ‌低延迟体验‌：实时响应
3. 自然映射‌：透视投影保持操作直觉

效果展示