CV中领域自适应问题

时间:2024-04-03 15:14:35

文章目录

Reference3(检测、分割、DLOW数据生成)

1. Domain Adaptive Faster R-CNN for Object Detection in the Wild, in CVPR, 2018

2. ROAD-NET: Reality Oriented ADaptation for Semantic Segmentation for Urban Scenes, in, CVPR, 2018

3. DLOW: Domain Flow for Adaptation and Generalization, in CVPR, 2019(Oral)

一、大纲 李文

CV中领域自适应问题

二、CV应用的挑战及解决方案:监控、自动驾驶、机器人、电商

CV中领域自适应问题CV中领域自适应问题

目前的解决方案

CV中领域自适应问题
CV中领域自适应问题
CV中领域自适应问题

三、机器学习方法分析

ML的模型基于独立同分布的假设

CV中领域自适应问题

域自适应

CV中领域自适应问题

四、定义 Domain adaptation 问题,数学描述

侠义的Transfer L是cross-task

Domain adaptation是S有label和T没有label

CV中领域自适应问题

五、解决Domain transfer key point,解决S和D的数据集的分布距离差异(散度、wd推土机D)

CV中领域自适应问题
CV中领域自适应问题

方案一:Feature-Level-通过g(x)的分布转换进行转换 例如TCA杨强

CV中领域自适应问题

方案二:CNN based方法前向的时候BN:AdaBN,反向方法:增加不同的loss方法:DAN,JAN,GRL

CV中领域自适应问题

方案三:instance-level方法:实例级别方法增加g(x)使Ps(x)*g(x) = Pt(x):KMM,DA-SVM

方案四:Deep Methods: Transductive DA, Associative DA

CV中领域自适应问题

方案五:GAN对抗学习使s和t趋于同分布:将S和T经过Generator映射到特征空间再用D进行分类,GD对抗,使source和target数据分布趋于同分布

CV中领域自适应问题

ML和CV处理Domain Transfer目标并非一个算法解决同一领域的所有问题,解决的是实现数据尽量同分布问题

CV中领域自适应问题
CV中领域自适应问题

六、目标检测中的Domain Adaptive(游戏侠盗猎车场景的目标检测容易获取label到真实场景没有标注的数据)实例level,并非语义(image level)

CV中领域自适应问题

检测Faster RNN

CV中领域自适应问题

Key idea域适应FasterRCNN 方法

CV中领域自适应问题
CV中领域自适应问题

在RPN阶段进行域转换

CV中领域自适应问题

Key idea域适应Faster RCNN 实现pipeline:加GRL层

GRL解析
CV中领域自适应问题

DA FasterRCNN实验结果(游戏场景到真实场景)

CV中领域自适应问题

DA FasterRCNN实验结果(真实场景到真实场景=不同城市camera)Kitty==》cityscapes

CV中领域自适应问题

DA FasterRCNN实验结果(天气变换)

CV中领域自适应问题

进一步的工作发展,物体尺度

CV中领域自适应问题

ROAD-NET分空间(块)进行卷积 2018cvpr

CV中领域自适应问题

CV中领域自适应问题
CV中领域自适应问题

七、Domian Flow for Adaptation and Generalization

Adaptation? Or Generalization?

CV中领域自适应问题
CV中领域自适应问题

Domain flow: 0-1 Domain 转换中间的插值Intermediate Domain

CV中领域自适应问题
CV中领域自适应问题
CV中领域自适应问题
CV中领域自适应问题
CV中领域自适应问题

八、Domain Flow 用于分割实验

CV中领域自适应问题
CV中领域自适应问题
CV中领域自适应问题

九、总结

CV中领域自适应问题

十 、Far future

CV中领域自适应问题

十一 、合作者

CV中领域自适应问题
CV中领域自适应问题