【CVPR‘24】ProxyTTA:域自适应深度补全,Test-Time Adaptation for Depth Completion

embedded/2024/9/24 6:15:53/

【CVPR'24】域自适应深度补全:Test-Time Adaptation for Depth Completion

    • 摘要
    • 1. 引言
    • 2. 相关工作
    • 3. 方法
      • 3.1 数据模态敏感性研究
      • 3.2 准备阶段 - 源域
      • 3.3 将代理映射部署到目标域
    • 4. 实验
    • 5. 讨论

摘要

深度补全旨在利用多传感器设置,从稀疏深度图中推断出密集深度图。尽管近年来取得了显著进展,现有方法通常会受到域转移问题的影响,例如从合成场景到现实世界应用的转移。在本文中,我们提出了 ProxyTTA,这是一种基于代理嵌入的测试时自适应方法,用于深度补全。我们的方法采用稀疏深度特征作为源域和目标域的桥梁,以应对目标域中 RGB 图像的域转移问题。具体而言,我们的代理嵌入学习在源域中捕获的对象形状的潜在几何和光度特征,这些对象可以跨域传递。我们的实验表明,ProxyTTA 在多个真实世界和合成数据集上取得了最先进的性能,超过了现有的测试时自适应基线。

1. 引言

深度补全是一个挑战性的问题,旨在通过结合 RGB 图像和稀疏深度图来预测密集的深度图。这一任务在自动驾驶、机器人导航和增强现实等领域中起着至关重要的作用。近年来,深度学习在深度补全任务上取得了显著进展。尽管如此,现有的方法通常在源域(例如合成环境)中进行训练,并在目标域(例如现实世界应用)中进行部署。然而,这样的域转移通常会导致显著的性能下降,因为 RGB 图像和深度图的分布在源域和目标域之间存在显著差异。

在传统的深度补全方法中,深度和 RGB 图像的结合被认为是提高精度的关键。然而,我们的研究发现,在


http://www.ppmy.cn/embedded/102564.html

相关文章

python读取配置文件简单封装 公共配置文件 config

之前有做过把爬虫数据写到数据库中的练习,这次想把数据库信息抽离到一个ini配置文件中,这样做的好处在于可以在配置文件中添加多个数据库,方便切换(另外配置文件也可以添加诸如邮箱、url等信息) 1.configparser模块 python使用自带的configparser模块用来读取配置文件,配置…

JS数据类型

下一篇持续更新中… 如有错误欢迎指正!!! 文章目录 前言学习目标学习内容 1. 数据类型简介1.1 为什么需要数据类型1.2 变量的数据类型 2.简单数据类型(基本数据类型)2.1 数字型 Number数字型进制数字型范围数字型三个…

W外链是什么?如何创建使用?

W 外链是什么 W 外链是一家企业级在线短链接生成工具,免费的微信获客助手,批量短链接网址生成等,支持自定义域名短链接数据统计等,链接缩短的同时,支持高并发、防劫持,专业的在线生成短链接工具。 W 外链…

CS224W—07 Machine Learning with Heterogeneous Graphs

CS224W—07 Machine Learning with Heterogeneous Graphs 本节中,我们将学习如何在异构图中进行图神经网络学习。 Heterogeneous Graphs 图中的节点类型/边类型不同,就会形成一个异构图(Heterogeneous Graph),例如下…

紫光同创——PLL IP 的使用(Logos2)

本文档主要针对 Logos2 系列的 PLL 配置,至于 Logos 系列的 PLL,可以参考《PLLIP 的使用(Logos)》的文档。 一、PLL IP 介绍 1、PLL 基本配置模式 Basic Configurations PLL IP 是紫光同创基于 PLL 及时钟网络资源设计的 IP,通过不同的参数配…

OpenCV 图像处理基础算法介绍c++

VS2022配置OpenCV环境 关于OpenCV在VS2022上配置的教程可以参考:VS2022 配置OpenCV开发环境详细教程 图像处理 图像处理是一个广泛的领域,它涉及到对图像数据进行分析、修改和改进的各种技术。以下是一些基本的图像处理操作,这些操作通常可…

LeetCode 热题100-39 对称二叉树

对称二叉树 给你一个二叉树的根节点 root , 检查它是否轴对称。 示例 1: 输入:root [1,2,2,3,4,4,3] 输出:true示例 2: 输入:root [1,2,2,null,3,null,3] 输出:false提示: 树中…

责任链设计模式详解

责任链设计模式详解 一、定义 责任链设计模式(Chain of Responsibility Pattern)是一种行为设计模式,它允许多个对象有机会处理请求,从而避免请求的发送者和接收者之间的耦合。这种模式将这些对象连接成一条链,并沿着…