使用手势在电脑刷抖音

本文的思路是:手部关键点识别,然后根据识别到的手部关键点的位置信息来判断上一条还是下一条,然后通过键盘快捷键进行上下刷抖音。个人感觉比较有趣。

一、训练检测手部关键点的模型

直接就是从网上找手部关键点的数据集,然后直接用yolov8的关键点预训练模型来训练。这样就直接得到了可以使用的手部关键点模型。

二、代码开发

代码的思路是得到检测结果,然后判断相对位置的变化,设置一个距离阈值,大于阈值就认定是有效命令。有个问题就是动作完成后会有复位动作,所以在一个有效命令后先冻结2秒的判断,以防向下挥之后复位动作又判断为向上挥,导致一直上下上下同一条视频。(当时碰到的时候还很疑惑,想的是效果不可能这么差呀,然后经过一波头脑风暴发现了这个问题)

三、现场测试

先打开网页版抖音,然后直接运行代码,然后到网页版抖音的界面,进行手势操作。

四、总结

当时也是闲的没事干,突发奇想,实现一个这个方法。效果还行,后续改进的话我有一个想法就是根据检测到的手部关键点来提取整个手部的轮廓,这样对于手的位置就比较真实,不会乱跳。但是这个主要是想法,并不清楚是否会有所作用。

相关推荐
三声三视11 小时前
一个卡片入场动画我返工 4 次:tri-lottie 规格单落地到 ArkTS 的踩坑记录
人工智能·ai·skillhub·tri-skills·tri-lottie
南京兴帝文化传媒有限公司11 小时前
AI大模型如何抓取和推荐无锡本地商户?GEO技术链路与POI权重算法拆解
大数据·人工智能·生活·geo 优化·ai搜索获客·无锡geo优化·长三角geo优化
SunnyDays101111 小时前
使用 Python 将 PowerPoint 转换为视频(无需安装 Microsoft PowerPoint)
python·powerpoint·ppt 转 动画·ppt 转 mp4·ppt 转 wmv·幻灯片转动画·幻灯片转 mp4
飞Link11 小时前
零基础:离散数据积分与 Python 实现保姆级教程
python·算法
是枚小菜鸡儿吖11 小时前
Windows 和 iPhone 怎么互传文件?用 PairDrop 搭一个自己的浏览器传输入口
服务器·人工智能·大模型
小刘快学习11 小时前
高并发下的优雅降级:企业AI网关的流量整形与过载保护
人工智能
知几蜗牛11 小时前
语义相近却总找错资料?从Embedding看懂向量检索
人工智能
知几蜗牛11 小时前
AI算力开始听电网指挥:比换GPU更现实的增产方法
人工智能
智慧医养结合软件开源11 小时前
【源码交付】智慧养老系统 · Java + Vue3-技术架构
大数据·人工智能·信息可视化·云计算
知几蜗牛11 小时前
票据抽取不一定要上最大模型:先看版式是否真的变化
人工智能