论文STEERER人群计数,车辆计数以及农作物计数算法详解(pytorch)

论文下载:https://arxiv.org/pdf/2308.10468

代码下载:https://github.com/taohan10200/STEERER

HRNet论文下载:https://arxiv.org/pdf/1909.11065.pdf

MMCV代码:https://github.com/open-mmlab/mmcv

本文提出STEERER模型,通过选择性继承学习实现多尺度特征融合。模型采用FSIA算法从低到高分辨率融合特征,并使用CAM方法显示各尺度特征区域。实验表明,该模型在人群计数,车辆(TRANCOS)和玉米计数(MTC)任务中表现优异。可视化结果显示STEERER在生成密度图和定位方面优于基线模型,尤其擅长检测大型和小而密集的物体。跨域测试证实模型具有良好可移植性,适用于车辆、树木等多种场景的定位和计数任务。

目录

多尺度的研究现状

提出的方法

整体模型架构

多尺度特征表示

特征选择和继承自适应器

掩码选择和继承损失

[Patch-Winner 选择方法](#Patch-Winner 选择方法)

综合实验

数据比较

可视化结果说明

定位性能对比

消融实验研究

跨域测试


多尺度的研究现状

提出的方法

整体模型架构

如图2所示:在选择性继承学习的监督下,采用FSIA将多尺度特征从最低分辨率融合到最高分辨率。使用CAM方法来显示了每个尺度上的熟练区域。Inference只使用最高分辨率的预测图。密度图中的掩蔽斑块表示它们在损失计算过程中被忽略。

多尺度特征表示

特征选择和继承自适应器

(上面结构图的左下角图)

掩码选择和继承损失

Patch-Winner 选择方法

综合实验

数据比较

表5显示,直接应用STEERER评估车辆(TRANCOS)和玉米计数(MTC)时效果良好。对于车辆计数,我们进一步降低估计MAE。对于植物计数,我们的模型优于其他SoTAs,它们的MAE和MSE分别下降了12.9%和14.0%,显示出显著的改进。

可视化结果说明

图4展示了实际场景下密度图的质量和定位结果。在人群场景中,与AutoScale相比,STEERER和基线模型在生成密度图方面都表现出更高的精度。在物体定位方面,与基线和P2PNet相比,STEERER在检测大型物体方面表现出更强的泛化能力,如图4中的红框部分所示。此外,STEERER在识别小而密集的物体方面保持了其有效性(见图4黄框部分)。所提出的STEERER模型具有跨不同领域的可移植性,例如车辆、树和玉米的定位和计数。

定位性能对比

消融实验研究

跨域测试

相关推荐
吴佳浩12 小时前
《拆解全球最火 AI 开源项目》第一季 · REA
人工智能
特立独行的猫A14 小时前
用仓颉语言 cj-tauri 框架,五分钟给娃做了个鸿蒙形近字游戏
java·后端·python
AllData公司负责人16 小时前
AI大模型数据开发底座系列说明书,AllData集成Chat2DB开源项目建设AI 数据库分析底座,涵盖AI 洞察/对话SQL/智能视图!
数据库·人工智能·sql·开源·ai 洞察·对话sql
泯泷17 小时前
让 Agent 分清“马上办、等一等、顺手办”
人工智能·llm·agent
鲜于言悠90518 小时前
Claude Fable 5.2 登场,专治复杂推理与长任务
人工智能
大可不必了18 小时前
03 函数定义和调用
开发语言·python
联犀19 小时前
如何工程化降低语音交互AI设备的延迟(小智ai,芙崽这样的ai设备)
人工智能
杉岩数据19 小时前
杉岩数据董事长陈坚:从数据存储到行业智能——杉岩的AI时代战略布局
人工智能
冬奇Lab19 小时前
Loop 工程到底是高深的新技术,还是炒冷饭?用训练一个识别狗的模型讲明白
人工智能
冬奇Lab19 小时前
一天一个开源项目(第260篇):Plannotator —— 给 AI 编码 Agent 配一块「可批注的审阅台」,计划和代码改动都能在浏览器里逐条批示
人工智能·开源·claude