嵌牛IT观察

Fine-Grained Generalized Zero-Sh

2021-12-08  本文已影响0人  欢乐马_e31d

姓名:寇世文

学号:21011110234

【嵌牛导读】Fine-Grained Generalized Zero-Shot Learning via Dense Attribute-Based Attention文章简介

【嵌牛鼻子】零样本学习

【嵌牛提问】目前零样本算法发展现状如何?

【嵌牛正文】

1、相关概念与发展现状

语义嵌入: D. Huynh, Changpinyo, Frome, Norouzi等人通过语义嵌入的方法将知识迁移到不可见类上,但这些方法通常将视觉或语义整体投影,discriminative 的属性或视觉特征.

生成方法: cycle-(U)WGAN,f-VAEGAN-D2,CADA-VAE,f-CLSWGAN利用类语义属性生成图像特征,将零样本转化为监督分类问题,但是它只合成了全局的高级语义特征,没有针对最能体现属性的区域进行优化生成。

[Y. Fu,和Kodirov] 针对漂移问题,提出了迁移学习在零样本分类中的应用,在该场景中,在训练过程中,可以简单无标签的未知类图片,从而学习测试集的数据分布。

Yu et al. and Zhu 尝试通过探索有效的图片区域来解决细分类零样本学习问题

贡献:

利用注意力机制,将attribute-base特征与之语义信息向量对齐,而非将整张图片特征与语义信息向量对齐。

2、相关工作

[Y. Fu,和Kodirov] 针对漂移问题,提出了迁移学习在零样本分类中的应用,在该场景中,在训练过程中,可以简单无标签的未知类图片,从而学习测试集的数据分布。

Yu et al. and Zhu 尝试通过探索有效的图片区域来解决细分类零样本学习问题

[33, 34, 35] 提出全局图像特征的方法来捕获细分类细节

[12, 36] 通过part-based supervision 来定位图像中特定的区域

[37, 10, 7, 38] 通过弱监督来定位这些特征的区域

以上的方法对于不可见类来说只能的带高级特征描述,因此不能很好地应用在零样本的情况下。

[cycle-(U)WGAN,f-VAEGAN-D2,CADA-VAE,f-CLSWGAN] 生成不可见类的特征,将零样本问题变成监督分类问题。

3、算法模型

4、目标函数

5、实验结果

上一篇下一篇

猜你喜欢

热点阅读