描述

項(xiàng)目介紹

在這個(gè)項(xiàng)目中，我們將創(chuàng)建一個(gè)簡(jiǎn)單的游戲并使用手勢(shì)檢測(cè)來控制玩家的移動(dòng)。使用手部界標(biāo)分析每一幀的手勢(shì)。如果檢測(cè)到手勢(shì)，則對(duì)其進(jìn)行分析以查看它是“HI”手勢(shì)還是“FIST”手勢(shì)。所有的手勢(shì)都有一個(gè)特定的編號(hào)，這個(gè)編號(hào)通過套接字連接傳輸。如果發(fā)送編號(hào)為“HI”的手勢(shì) 5，則發(fā)送閉合的“FIST”手勢(shì)編號(hào)為 0。傳輸是實(shí)時(shí)完成的。在 Wiznet EVB PICO W5100s 中接收到坐標(biāo)后，它會(huì)檢查是否存在 5 或 0。如果接收到 5，則玩家籃子向下移動(dòng)，如果接收到 0，則向下移動(dòng)。游戲顯示在 OLED SSD1306 顯示屏上。

電路圖說明

VCC、GND[Pin 36、Pin 38]連接到SSD1306 OLED Display的VCC和GRD。OLED 顯示器的 SDA 引腳連接到用作數(shù)據(jù)引腳的 GPIO4 引腳 [引腳 6]。OLED 顯示器的 SCL 引腳連接到用作時(shí)鐘引腳的 GPIO5 引腳 [引腳 7]。USB 連接用于為 Wiznet EVB PICO W5100S 和 OLED 顯示器供電。連接以太網(wǎng)以建立套接字以太網(wǎng) UDP 通信。使用的顯示器是一個(gè) i2c 顯示器，它使用 4 個(gè)引腳并在 3v 范圍內(nèi)工作。SDA 引腳用于數(shù)據(jù)，SCL 是同步顯示的時(shí)鐘信號(hào)。

如何整合AI？

在這個(gè)項(xiàng)目中，OpenCV 和 Mediapipe 用于手勢(shì)檢測(cè)。我們?cè)谶@個(gè)項(xiàng)目中使用手勢(shì)來移動(dòng)球員籃筐。手勢(shì)檢測(cè)代碼將識(shí)別每個(gè)手指的界標(biāo)并分析手指的位置。“HI”手勢(shì)將沿 Y 軸向下移動(dòng)球員籃筐，“閉拳”手勢(shì)將沿 Y 軸向下移動(dòng)球員籃筐。Wiznet EVB PICO W5100s板與AI之間的通信是通過套接字UDP連接建立的。在檢測(cè)到手勢(shì)時(shí)，每個(gè)手勢(shì)都會(huì)被賦予一個(gè)特定的數(shù)字，并將該數(shù)字傳遞給套接字連接。游戲停止控制信號(hào)“STOP”也通過這個(gè)插座連接傳遞。

Arduino 代碼說明

所有庫和變量都在第 [13-36] 行初始化。這將初始化以太網(wǎng)庫、SSD1306 顯示以及套接字綁定地址和端口。行號(hào) [41-63]。啟動(dòng)以太網(wǎng)連接并用零初始化屏幕。ethstart() 函數(shù)啟用以太網(wǎng)端口并設(shè)置 IP 地址變量。這將可用 10000 秒/10 秒。必須將此 IP 地址復(fù)制并鍵入到 python 控制臺(tái)。無效循環(huán)從行號(hào) [66-75] 開始，它重復(fù)調(diào)用 main_menu() 函數(shù)并更新顯示，不斷將更改呈現(xiàn)在屏幕上。main_menu() 函數(shù)行號(hào) [202-214] 有 5 個(gè)函數(shù)。read_input() 函數(shù)行號(hào) [98-121] 將通過信號(hào)讀取控制信號(hào)并設(shè)置 current_input 變量。在調(diào)用 read_input() 函數(shù)后調(diào)用 action() 函數(shù)。將設(shè)置玩家籃子的 Y 坐標(biāo)，基本上上下移動(dòng)它以接住傳入的蘋果。移動(dòng)是實(shí)時(shí)完成的。move_basket 函數(shù)將根據(jù)坐標(biāo)顯示球拍。enemy_fire() 函數(shù)行號(hào) [163] 將從 y 坐標(biāo)隨機(jī)發(fā)射蘋果。當(dāng)蘋果沿 X 坐標(biāo)移動(dòng)時(shí)，它的速度會(huì)增加。當(dāng)籃子 X 和蘋果 X 坐標(biāo)發(fā)生排序時(shí)，會(huì)添加一個(gè)分?jǐn)?shù)，并且還會(huì)在屏幕上顯示“HIT”消息。一旦它到達(dá)設(shè)定的 X 坐標(biāo)。子彈會(huì)將其位置重置為隨機(jī)的 Y 坐標(biāo)。在第 [110] 行中，為游戲結(jié)束屏幕啟用了控制信號(hào)條件。這是通過在玩游戲 1 分鐘后收到“停止”信號(hào)來完成的。這將觸發(fā) game_over() 函數(shù)行號(hào) [81] 的激活。這將打印一個(gè)“游戲結(jié)束”屏幕和分?jǐn)?shù)。這是通過在玩游戲 1 分鐘后收到“停止”信號(hào)來完成的。這將觸發(fā) game_over() 函數(shù)行號(hào) [81] 的激活。這將打印一個(gè)“游戲結(jié)束”屏幕和分?jǐn)?shù)。這是通過在玩游戲 1 分鐘后收到“停止”信號(hào)來完成的。這將觸發(fā) game_over() 函數(shù)行號(hào) [81] 的激活。這將打印一個(gè)“游戲結(jié)束”屏幕和分?jǐn)?shù)。

游戲玩法

該游戲是單人游戲，玩家必須在 60 秒內(nèi)捕獲盡可能多的蘋果。蘋果在屏幕上的任意位置隨機(jī)生成，每毫秒都會(huì)快速移動(dòng)。玩家必須使用手勢(shì)移動(dòng)籃筐。每次捕獲蘋果將獎(jiǎng)勵(lì) 1 分。籃子只能上下移動(dòng)。玩家可以使用“CLOSED FIST”手勢(shì)將籃筐向下移動(dòng)，使用“HI”手勢(shì)將籃筐向上移動(dòng)。到 60 秒結(jié)束時(shí)，捕獲將停止，并且將出現(xiàn)游戲結(jié)束屏幕并投影比分。

?