CodeBind：基于统一组合码本的多模态对齐解耦表示学习

Zeyu Chen, Jie Li, Kai Han

摘要

CodeBind通过模态共享-特定码本设计优化多模态表示空间，利用组合向量量化方案将特征分解为共享和特定组件。在九种模态上验证了该方法在分类和检索任务中的最优性能。

multimodal alignmentrepresentation learningcodebookroboticscompositional vector quantization

LEARNING

📊 8,465 引用

D. O. Hebb

2005

LEARNING

📊 7,678 引用

Benoît B. Mandelbrot, John W. Van Ness

1968

LEARNING

开放获取📊 7,484 引用

Laith Alzubaidi, Jinglan Zhang, Amjad J. Humaidi 等 10 位作者

2021

LEARNING

📊 4,608 引用

Andre Esteva, Alexandre Robicquet, Bharath Ramsundar 等 10 位作者

2018