arXiv · 机器人与计算机视觉· Dominik Schnaus, Thomas Dag\`es, Daniel Cremers, Xi Wang, Phillip Isola·· 2026-10-08AI 评分42
Shared Geometry As A Rosetta Stone 方法无需配对数据实现跨模态对齐并支持无配对文本生成图像
Shared Geometry As A Rosetta Stone: Cross-Modal Alignment Without Paired Data
AI 导读
GeoWarP 方法利用共享几何初始化,通过估计单正交映射在无配对示例下对齐独立训练的嵌入集。该方法在各类数据集与模态上均能一致完成粗粒度跨模态对齐,且标准几何指标可准确预测对齐可行性。在极少样本 regime 下性能显著优于现有方案,并支持无配对数据的文本生成图像任务。
来源:arXiv · 机器人与计算机视觉 · arxiv.org