python实现虚拟键盘

简单的实现了一下虚拟键盘，其中有些问题还没有解决，后续有时间继续搞！
其实就是在特定位置检测到特定的字母然后输出。


import cv2
from cvzone.HandTrackingModule import HandDetector
from time import sleep
import numpy as np
import cvzone
from pynput.keyboard import Controllercap = cv2.VideoCapture(0)
cap.set(3, 1280)
cap.set(4, 720)detector = HandDetector(detectionCon=0.8)
keys = [["Q", "W", "E", "R", "T", "Y", "U", "I", "O", "P"],["A", "S", "D", "F", "G", "H", "J", "K", "L", ";"],["Z", "X", "C", "V", "B", "N", "M", ",", ".", "/"]]
finalText = ""keyboard = Controller()def drawAll(img, buttonList):for button in buttonList:x, y = button.posw, h = button.sizecvzone.cornerRect(img, (button.pos[0], button.pos[1], button.size[0], button.size[1]),20, rt=0)cv2.rectangle(img, button.pos, (x + w, y + h), (255, 0, 255), cv2.FILLED)cv2.putText(img, button.text, (x + 20, y + 65),cv2.FONT_HERSHEY_PLAIN, 4, (255, 255, 255), 4)return img#
# def drawAll(img, buttonList):
#     imgNew = np.zeros_like(img, np.uint8)
#     for button in buttonList:
#         x, y = button.pos
#         cvzone.cornerRect(imgNew, (button.pos[0], button.pos[1], button.size[0], button.size[1]),
#                           20, rt=0)
#         cv2.rectangle(imgNew, button.pos, (x + button.size[0], y + button.size[1]),
#                       (255, 0, 255), cv2.FILLED)
#         cv2.putText(imgNew, button.text, (x + 40, y + 60),
#                     cv2.FONT_HERSHEY_PLAIN, 2, (255, 255, 255), 3)
#
#     out = img.copy()
#     alpha = 0.5
#     mask = imgNew.astype(bool)
#     print(mask.shape)
#     out[mask] = cv2.addWeighted(img, alpha, imgNew, 1 - alpha, 0)[mask]
#     return outclass Button():def __init__(self, pos, text, size=[85, 85]):self.pos = posself.size = sizeself.text = textbuttonList = []
for i in range(len(keys)):for j, key in enumerate(keys[i]):buttonList.append(Button([100 * j + 50, 100 * i + 50], key))while True:success, img = cap.read()img = detector.findHands(img)lmList, bboxInfo = detector.findPosition(img)img = drawAll(img, buttonList)if lmList:for button in buttonList:x, y = button.posw, h = button.sizeif x < lmList[8][0] < x + w and y < lmList[8][1] < y + h:cv2.rectangle(img, (x - 5, y - 5), (x + w + 5, y + h + 5), (175, 0, 175), cv2.FILLED)cv2.putText(img, button.text, (x + 20, y + 65),cv2.FONT_HERSHEY_PLAIN, 4, (255, 255, 255), 4)l, _, _ = detector.findDistance(8, 12, img, draw=False)print(l)## when clickedif l < 30:keyboard.press(button.text)cv2.rectangle(img, button.pos, (x + w, y + h), (0, 255, 0), cv2.FILLED)cv2.putText(img, button.text, (x + 20, y + 65),cv2.FONT_HERSHEY_PLAIN, 4, (255, 255, 255), 4)finalText += button.textsleep(0.15)cv2.rectangle(img, (50, 350), (700, 450), (175, 0, 175), cv2.FILLED)cv2.putText(img, finalText, (60, 430),cv2.FONT_HERSHEY_PLAIN, 5, (255, 255, 255), 5)cv2.imshow("Image", img)cv2.waitKey(1)

python实现虚拟键盘相关推荐

Python获取鼠标位置，虚拟键盘操作
Python获取鼠标位置,虚拟键盘操作 PS: 也是从网上各个帖子中学习的Python,因此代码的格式以及内容有粘贴网上其他大神的代码,如有侵权请告知删除代码转载:https://blog.csdn ...
Python调用驱动级按键--DD虚拟键盘
开发DNF连点功能时,常规的PyMouse PyKeyboard无效猜测原因是DNF屏蔽了模拟信号尝试使用驱动级按键作者:石头三颗链接:https://www.zhihu.com/questi ...
如何使用 OpenCV 开发虚拟键盘
点击上方"小白学视觉",选择加"星标"或"置顶" 重磅干货,第一时间送达介绍 OpenCV 是最流行的计算机视觉任务库,它是用于机器学习. ...
通过OpenCV实现虚拟键盘
通过OpenCV实现虚拟键盘环境配置在Anaconda中创建一个python=3.7的环境可在pycharm内直接新建环境,也可以通过命令行的方式 conda create -n your_en ...
Qt5.13.0虚拟键盘使用文档说明及函数说明（一）构建 build
首先之前的工作都是为了想验证虚拟键盘的使用,才有了之前编译x11 .arm等qt的步骤. 在到这之前的构建环境,我说认真的,真的烦的要死,每次构建用的时间又多,配置完了编译会出一大堆error,加上公 ...
USB转蓝牙hid键鼠按键精灵控制手机虚拟键盘、虚拟触摸等功能
#USB转蓝牙hid键鼠按键精灵控制手机虚拟键盘.虚拟触摸等功能提示:目的是为了实现通过电脑控制,达到手机虚拟触摸的功能简单介绍提示:开放协议,可再行开发,提供C# python c++ 等开发 ...
PySide2使用屏幕虚拟键盘
1.屏幕虚拟键盘创建文件virtualkeyboard.py import sys, os from PySide2.QtWidgets import QApplication, QLineEdit ...
iOS 上常用的两个功能：点击屏幕和return退出隐藏键盘和解决虚拟键盘
原文地址:http://blog.csdn.net/xiaotanyu13/article/details/7711954 iOS上面对键盘的处理很不人性化,所以这些功能都需要自己来实现, 首先是点击 ...
手机虚拟摄像头_没键盘也能打字？三星展示最新虚拟键盘Selfie Type：是真的
1月8日消息,三星在近日举行的2020 CES国际消费电子展上展示了虚拟键盘Selfie Type,它是一款全新的概念产品,由三星内部的创意实验室C-Lab研发,能够通过手机的前置摄像头来智能识别用户 ...
一个虚拟键盘的简单思路
在手机上做一个类似百度输入法之类的虚拟键盘. 像这样独立apk类似的,一般是用进程间通信来传递数据,可能会被程序监听到输入的内容. 如果自己做呢? 就是在界面上写数字键盘和拼音键盘的布局,可以当点击某 ...

python实现虚拟键盘

python实现虚拟键盘

python实现虚拟键盘相关推荐

最新文章

热门文章