【行空板】手势控风扇

【项目设计】Mediapipe识别手势，利用手指间距来控制风扇转速，风扇连接在扩展板上单独供电。软件编程利用Mind+测试版中可以连接行空板进行编程。
【行空板】 行空板是一款专为Python学习和使用设计的新一代国产开源硬件，采用单板计算机架构，集成LCD彩屏、WiFi蓝牙、多种常用传感器和丰富的拓展接口。同时，其自带Linux操作系统和Python环境，还预装了常用的Python库，让广大师生只需两步就能进行Python教学。






【测试风扇】
金手指：引脚编号兼容micro:bit, 19路独立I/O（支持1路I2C、1路UART、2路SPI、6路12位ADC、5路12位PWM）

micro:bit 电机驱动扩展板

1. 
   
2. # -*- coding: UTF-8 -*-
   
3. #实验效果： PWM输出实验,控制LED灯亮度变化
   
4. #接线：LED灯接到行空板P21引脚上
   
5. import time
   
6. from pinpong.board import Board,Pin
   
7. 
   
8. Board().begin()               #初始化
   
9. 
   
10. # PWM模拟输出引脚支持: P0  P2  P3  P10  P16  P21  P22  P23
    
11. #pwm21 = PWM(Pin(Pin.P21)) #将引脚传入PWM初始化  模拟输出方法1
    
12. pwm2 = Pin(Pin.P2, Pin.PWM) #初始化引脚为PWM模式 模拟输出方法2
    
13. 
    
14. while True:
    
15.    
    
16.         pwm2.write_analog(1023) #PWM输出
    
17.         time.sleep(4)
    
18.         pwm2.write_analog(0) #PWM输出
    
19.         time.sleep(4)
    

复制代码

【测试摄像头】
安装Mediapipe库与OpenCV库，参考AI人工智能应用：https://wiki.unihiker.com/ai_project

1. 
   
2. import cv2
   
3. #False:不旋转屏幕（竖屏显示，上下会有白边）
   
4. #True：旋转屏幕（横屏显示）
   
5. screen_rotation = True
   
6. cap = cv2.VideoCapture(0)
   
7. cap.set(cv2.CAP_PROP_FRAME_WIDTH, 320)  #设置摄像头图像宽度
   
8. cap.set(cv2.CAP_PROP_FRAME_HEIGHT, 240) #设置摄像头图像高度
   
9. cap.set(cv2.CAP_PROP_BUFFERSIZE, 1)     #设置OpenCV内部的图像缓存，可以极大提高图像的实时性。
   
10. 
    
11. cv2.namedWindow('camera',cv2.WND_PROP_FULLSCREEN)    #窗口全屏
    
12. cv2.setWindowProperty('camera', cv2.WND_PROP_FULLSCREEN, cv2.WINDOW_FULLSCREEN)   #窗口全屏
    
13. 
    
14. while True:
    
15.   success, img = cap.read()
    
16.   if not success:
    
17.         print("Ignoring empty camera frame.")
    
18.         continue
    
19.   if screen_rotation: #是否要旋转屏幕
    
20.         img = cv2.rotate(img, cv2.ROTATE_90_COUNTERCLOCKWISE) #旋转屏幕
    
21.   cv2.imshow("camera", img)
    
22.   if cv2.waitKey(1) & 0xFF == ord('q'):
    
23.     break
    

复制代码

【手指距离识别】

1. 
   
2. import cv2
   
3. from cvzone.HandTrackingModule import HandDetector
   
4. cap = cv2.VideoCapture(0)
   
5. detector = HandDetector(detectionCon=0.8, maxHands=2)
   
6. cap.set(cv2.CAP_PROP_FRAME_WIDTH, 320)  #设置摄像头图像宽度
   
7. cap.set(cv2.CAP_PROP_FRAME_HEIGHT, 240) #设置摄像头图像高度
   
8. cap.set(cv2.CAP_PROP_BUFFERSIZE, 1)     #设置OpenCV内部的图像缓存，可以极大提高图像的实时性。
   
9. screen_rotation = False
   
10. while True:
    
11.         # Get image frame
    
12.         success, img = cap.read()
    
13.         # Find the hand and its landmarks
    
14.         hands, img = detector.findHands(img)  # with draw
    
15.         # hands = detector.findHands(img, draw=False)  # without draw
    
16. 
    
17.         if hands:
    
18.             # Hand 1
    
19.             hand1 = hands[0]
    
20.             lmList1 = hand1["lmList"]  # List of 21 Landmark points
    
21.             bbox1 = hand1["bbox"]  # Bounding box info x,y,w,h
    
22.             centerPoint1 = hand1['center']  # center of the hand cx,cy
    
23.             handType1 = hand1["type"]  # Handtype Left or Right
    
24. 
    
25.             fingers1 = detector.fingersUp(hand1)
    
26.             # Find Distance between two Landmarks. Could be same hand or different hands
    
27.             length, info, img = detector.findDistance(lmList1[8][0:2], lmList1[4][0:2],img,True)  # with draw
    
28.             # length, info = detector.findDistance(lmList1[8], lmList2[8])  # with draw
    
29.         # Display
    
30.         cv2.imshow("Image", img)
    
31.         if cv2.waitKey(1) & 0xFF == ord('q'):
    
32.             break
    
33. 
    

复制代码

mind+中测试


行空板中测试

【控制风扇完整程序】

1. 
   
2. import cv2
   
3. from HandTrackingModule import HandDetector
   
4. from pinpong.board import Board,Pin
   
5. 
   
6. Board().begin()               #初始化
   
7. pwm2 = Pin(Pin.P2, Pin.PWM) #初始化引脚为PWM模式 模拟输出方法2
   
8. cap = cv2.VideoCapture(0)
   
9. detector = HandDetector(detectionCon=0.8, maxHands=2)
   
10. cap.set(cv2.CAP_PROP_FRAME_WIDTH, 320)  #设置摄像头图像宽度
    
11. cap.set(cv2.CAP_PROP_FRAME_HEIGHT, 240) #设置摄像头图像高度
    
12. cap.set(cv2.CAP_PROP_BUFFERSIZE, 1)     #设置OpenCV内部的图像缓存，可以极大提高图像的实时性。
    
13. def numberMap(x, in_min, in_max, out_min, out_max):
    
14.   return int((x - in_min) * (out_max - out_min) / (in_max - in_min)) + out_min
    
15. 
    
16. while True:
    
17.         # Get image frame
    
18.         success, img = cap.read()
    
19.         # Find the hand and its landmarks
    
20.         hands, img = detector.findHands(img)  # with draw
    
21.         # hands = detector.findHands(img, draw=False)  # without draw
    
22. 
    
23.         if hands:
    
24.             # Hand 1
    
25.             hand1 = hands[0]
    
26.             lmList1 = hand1["lmList"]  # List of 21 Landmark points
    
27.             bbox1 = hand1["bbox"]  # Bounding box info x,y,w,h
    
28.             centerPoint1 = hand1['center']  # center of the hand cx,cy
    
29.             handType1 = hand1["type"]  # Handtype Left or Right
    
30. 
    
31.             fingers1 = detector.fingersUp(hand1)
    
32.             length1, info = detector.findDistance(lmList1[20][0:2], lmList1[0][0:2],img,False)  # with draw
    
33.             length, info, img = detector.findDistance(lmList1[8][0:2], lmList1[4][0:2],img,True)  # with draw
    
34.             pwm2.write_analog(numberMap(int(length/length1*100),0,100,0,1024)) #PWM输出
    
35.         else:
    
36.             pwm2.write_analog(0) #PWM输出  
    
37.        # Display
    
38.         cv2.imshow("Image", img)
    
39.         cv2.waitKey(1)
    
40. 
    

复制代码

【演示视频】

神奇的手势控制

感谢分享，行空板的项目已经开始造起来了，学习啦。

Mary 发表于 2022-5-11 15:53
感谢分享，行空板的项目已经开始造起来了，学习啦。

很好用的板子

大神，请教下你的作品手势控风扇，我用你的完整程序运行后摄像头可出来，但手一放程序就结束，提示Traceback (most recent call last):
  File "/root/mindplus/cache/手势控风扇.mp/shoushifengshan.py", line 33, in <module>
    length1, info = detector.findDistance(lmList1[20][0:2], lmList1[0][0:2],img,False)
TypeError: findDistance() takes from 3 to 4 positional arguments but 5 were given请问哪里出错了

老曾 发表于 2023-3-2 23:22
大神，请教下你的作品手势控风扇，我用你的完整程序运行后摄像头可出来，但手一放程序就结束，提示Tracebac ...

detector.findDistance，我在不同的机器上使用时，也出现Mediapipe有时会出现，参数不一致的情况，我会去看他的源程序，有时要改一下，才行。