SSL-RGB2IR:半监督式RGB到IR图像对图像转换,用于增强语义分割和对象检测中的视觉任务训练

摘要:

注释红外(IR)图像数据集的稀缺限制了深度学习网络实现与RGB数据相当的性能。为此,我们引入了一种新型半监督式RGB到红外图像对图像转换模型(SSL-RGB2IR),该模型从RGB图像生成合成红外数据。我们的模型有效保留了合成和真实世界数据生成图像中的红外特性。与现有图像到图像转换技术相比,基于生成的红外数据训练模型显著提升了下游任务(如分割和检测)的性能。值得注意的是,在模拟到实传输中,使用SSL-RGB2IR生成的红外图像训练的分割模型优于基线和其他图像到图像(I2I)模型。此外,对于使用EO/IR聚变图像的实际应用,这种方法解决了共注册EO和IR图像的常见问题,因为由于传感器特性不同,EO和IR图像常常存在固有的错位。我们的代码可在 https://github.com/prahlad-anand/ssl-rgb2ir https://github.com/prahlad-anand/ssl-rgb2ir 获取。
会议日期: 2024年10月14-18日
加入IEEE Xplore的日期: 2024年12月25日
ISBN信息:

ISSN信息:

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值