Incremental Few-Shot Learning for Pedestrian Attribute Recognition

本文提出了一种针对现实世界应用中常见问题的元学习方法,即增量式少样本(多标签)属性学习。该方法通过引入APGM和ARM模块,实现了在新属性上的快速适应,同时保持了低注释和内存需求,特别适用于资源受限的设备场景。

动机:
大多数现有的方法都是为一组固定的属性设计的。他们无法处理增量式的少样本学习场景,即将一个训练有素的模型应用于新添加的具有稀缺数据的属性,而这些数据通常存在于现实世界中。

Contribution:
1.They raise a practical issue termed as incremental few-shot (multi-label) attribute learning which commonly exists in real-word applications.
2.They put forward a meta learning based method that achieves competitive performances.
3.Their method demonstrates the capability of fast adaptation with low annotation and memory requirements which is desirable in low-resource on-device scenarios.

构造了一个新的问题:

在这里插入图片描述
方法模型:
在这里插入图片描述
总体方法为上图a,首先从一个训练良好的基础模型Mbase(蓝色部分)开始,从概念上分为两个部分:特征提取器F和分类器w。然后引入APGM模块,该模块不干扰基础模型,这样就不会影响Abase的性能。APGM将包含来自多个属性的编码信息的特征嵌入作为输入,并为每个属性生成独立的APE嵌入。然后利用APEs生成新的属性的分类权重。此外,当Dnovel也被标注上基本属性时,提出了ARM,它以基本属性的分类权值作为输入,以APGM的方式产生新的分类权值。为了方便学习在Dbase上对这些模块进行了情景训练。
情景训练过程如下所示
在这里插入图片描述
在这里插入图片描述
APGM的结构如上图b所示,具体编码流程如下:
在这里插入图片描述
实验:
因为提出了新的问题,所以需要对数据集做few-shot的设置,具体设置方法如下:
在这里插入图片描述
选择的模型:
由于关注的是与特定模型无关的学习算法,采用了DeepMAR,以ResNet50为骨干作为基础modelMbase,因为它具有竞争性能和简单性。
结果:
在这里插入图片描述
之后做了ARM的效果以及不同Ways and Shots的实验,证实了ARM的有效性和在few-shot场景的优势

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值