AAAI 2023| 旷视研究院入选论文亮点解读

news2024/11/15 15:50:07

近日，国际人工智能顶级会议 AAAI 2023 （Association for the Advancement of Artificial Intelligence）公布了录用结果。本届会议共收到来自全球的 8777 篇论文投稿，其中 1721 篇论文被录用，论文录用率为 19.6%。

AAAI 是由国际人工智能促进协会主办的年会，是人工智能领域中历史最悠久、涵盖内容最广泛的国际顶级学术会议之一，也是中国计算机学会（CCF）推荐的 A 类国际学术会议。本届会议旷视研究院被收录的论文涵盖 3D 重建、多目标跟踪、视觉语言多模态、3D 检测、图像对齐等方向，下面是入选论文概览：

Semi-supervised Deep Large-baseline Homography Estimation with Progressive Equivalence Constraint

基于渐进式等价约束的半监督深度大基线单应性矩阵估计

在大基线（large-baseline）场景中，由于图像间的重合度低以及相对运动大使得单应性矩阵很难直接估计。为此，我们提出一种渐进式的估计策略，将 large-baseline 单应性矩阵转换为多个中间项，将中间项累积相乘就可以重建初始单应性矩阵。我们引入了一种半监督的单应性一致损失，包括用于优化中间项单应性矩阵的有监督项和基于累积重构在不使用光度损失的情况下优化 large-baseline 单应性矩阵的无监督项。同时，我们提出了一个大规模的数据集，涵盖了常规和挑战性场景。

所属领域：图像对齐/配准

关键词：半监督、大基线单应性矩阵、图像对齐

One is All: Bridging the Gap Between Neural Radiance Fields Architectures with Progressive Volume Distillation

一即一切：通过渐进式体蒸馏弥合神经辐射场架构间的差距

神经辐射场 NeRF可以高质量地重建三维场景，目前多种方法都在争夺其核心结构，包括MLP（NeRF）、张量（Plenoxels）、低秩张量（tensoRF）和哈希表（INGP）等。这些表示都有一定的适应场景，比如基于 hash 的 INGP 模型小、训练快，但由于分辨率混叠等原因，其不如基于张量的 Plenoxels 更易实现对场景的空间编辑。为了弥补 NeRF 系列架构间差异，本文提出了渐进式体蒸馏（PVD）实现对上述不同架构间的任意转换。通过 PVD 得到一个 NeRF 模型通常要比从头训练更快，且在部分数据集上质量更高。

论文链接：

https://arxiv.org/abs/2211.15977

开源链接：

https://github.com/megvii-research/AAAI2023-PVD

所属领域：3D重建

关键词：神经辐射场、蒸馏、NeRF、INGP、Plenoxels、tensoRF

Generalizing Multiple Object Tracking to Unseen Domains by Introducing Natural Language Representation

利用自然语言表征提升多目标跟踪跨域跟踪性能

本文首先指出当前的多目标跟踪任务多在同一类场景下进行评测，即训练集和测试集取自同一场景（比如MOT17，MOT20），现有的 SOTA 跟踪器在不进行 fine-tune 的前提下直接应用在新场景跟踪性能会大幅下降，为此本文首次提出利用自然语言的高层次语义信息解决跨域跟踪问题，首次将视觉语言预训练模型 CLIP 并将其与 query-basedtracker 结合，基于此搭建的新的多目标跟踪模型 LTrack 可在域内和跨域场景上均实现优异的跟踪性能，为今后利用语言信息与视觉信息结合解决跟踪问题提供一个新的思路。