使用手势在电脑刷抖音

本文的思路是:手部关键点识别,然后根据识别到的手部关键点的位置信息来判断上一条还是下一条,然后通过键盘快捷键进行上下刷抖音。个人感觉比较有趣。

一、训练检测手部关键点的模型

直接就是从网上找手部关键点的数据集,然后直接用yolov8的关键点预训练模型来训练。这样就直接得到了可以使用的手部关键点模型。

二、代码开发

代码的思路是得到检测结果,然后判断相对位置的变化,设置一个距离阈值,大于阈值就认定是有效命令。有个问题就是动作完成后会有复位动作,所以在一个有效命令后先冻结2秒的判断,以防向下挥之后复位动作又判断为向上挥,导致一直上下上下同一条视频。(当时碰到的时候还很疑惑,想的是效果不可能这么差呀,然后经过一波头脑风暴发现了这个问题)

三、现场测试

先打开网页版抖音,然后直接运行代码,然后到网页版抖音的界面,进行手势操作。

四、总结

当时也是闲的没事干,突发奇想,实现一个这个方法。效果还行,后续改进的话我有一个想法就是根据检测到的手部关键点来提取整个手部的轮廓,这样对于手的位置就比较真实,不会乱跳。但是这个主要是想法,并不清楚是否会有所作用。

相关推荐
BK贝壳5 小时前
亿级用户签到位图选型复盘:用 bool-hybrid-array 扛冷启动打卡,也把它和 Roaring/Redis 的边界测清楚了
数据结构·python·性能优化·numpy
2601_966949657 小时前
如何根据研究的起止时间截取分钟级行情?Python 实战与 QuantDash 数据处理指南
开发语言·python·pandas·量化交易·1024程序员节·股票数据·quantdash
张彦峰ZYF8 小时前
越过边界之前:Reward Seeker 实验如何改写智能体安全的时间逻辑
人工智能·ai agent·anthropic·智能体安全·reward seeker·“控制评价过程”泛化跨领域策略·envbom
拓恒技术8 小时前
无人机巡检AI算法的工程化落地:从需求到交付的5个核心环节
人工智能·算法·无人机
罗西的思考11 小时前
AI 时代的 “房谋杜断”:如何培养能力、品味与判断力
人工智能·算法·机器学习
在世修行11 小时前
智学文枢:页面切换与跨页数据预填
python·桌面应用·signal·1024程序员节·pyside·跨页跳转·状态预填
字节跳动视频云技术团队11 小时前
720P 直升 8K,解密 2026 抖音美好奇妙夜巨幕超分黑科技
人工智能·音视频开发
2601_9628857211 小时前
如何用 Python 把 K 线重采样成任意周期?
开发语言·python
打工仔折腾 AI11 小时前
在 Ubuntu ARM64 部署 Q1 V3.0 MuJoCo 模型:加载、单步推理与执行器响应解析
linux·运维·人工智能·python·深度学习·ubuntu·性能优化
逐米时代12 小时前
从试点验证到协同深化:制造业AI转型三年路线图设计方法
人工智能