因子的非欧几何:用于表征解耦的 FactoMap 地图

8 十一月 20268 视图

提出了一种通过区域、由生成器定义的等价关系以及局部尺度来描述因子空间的方法,从而能够区分拓扑上接近但几何结构不同的情况。FactoMap 方法在结构化网格上训练可解释的原型,并在实验中展现出更稳定地保持因子连续性及其分离的能力。

因子的非欧几何:用于表征解耦的 FactoMap 地图

为什么欧几里得乘积坐标会扭曲因子空间

许多解耦方法将生成因子表示为欧几里得乘积坐标。然而,底层空间可能具有周期性、边界塌缩,或随位置变化的几何结构。这体现了因子的非欧几里得几何。论文《Beyond Uniform Local Isometry and Topology: FactoMap for Disentangled Representations》(arXiv:2608.24762)阐述了这一局限。

欧几里得模型未能考虑的因素:

  • 因子的周期性;
  • 边界塌缩;
  • 随位置变化的几何结构;
  • 非均匀的延展程度。

结论:欧几里得坐标图仍是一种实用的抽象,但无法保证与因子结构相符。应根据上述属性检验方法。

因子空间结构涵盖哪些内容

因子空间结构涵盖因子区域、由生成器诱导的等同关系,以及随位置变化的尺度。这样的组合能够区分拓扑等价但因子几何不同的空间。它描述的不只是拓扑,还包括几何结构。

标准拓扑等价性因子空间结构
考虑的内容空间的拓扑因子区域、由生成器诱导的等同关系,以及随位置变化的尺度
能够区分的内容无法区分拓扑相同但几何不同的空间能够区分拓扑等价但几何不同的空间

结论:该结构为方法提供了评判标准。方法不仅应区分拓扑,还应区分因子的几何结构。

为什么统计独立性不能保证几何均匀

统计独立性不能保证乘积空间的几何结构均匀。相互独立的因子对观测的影响可能各不相同。因此,乘积空间的几何结构仍然不均匀。

例如:独立的色调(hue)和尺度(scale)可能以不同且依赖于尺度的强度影响观测。固定缩放无法消除由此产生的各向异性。

独立性检验无法涵盖的内容:

  • 乘积空间几何结构的均匀性;
  • 因子影响力随位置变化的依赖关系;
  • 固定缩放能否消除各向异性。

结论:独立性检验并不足够。还需要评估生成器如何诱导因子的几何结构和尺度。

FactoMap 如何将结构迁移到表示中

因子空间拓扑映射(Factor-Space Topographic Map,FactoMap)会训练可解释的原型。由结构化网格构成的因子空间为这些原型编制索引。拓扑学习会将网格的周期性、边界塌缩和非均匀延展程度迁移到表示中。

步骤:

  1. 定义因子空间结构。
  2. 训练由网格索引的可解释原型。
  3. 通过拓扑学习将网格属性迁移到表示中。

结论:FactoMap 将因子结构纳入训练过程。它不预设欧几里得均匀性,而是将网格属性迁移到表示中。

实验结果应检查什么

在实验中,与结构相符的表示更能保留因子的连续性,也改善了底层因子的解耦。这些结果提供了实践中的参考依据。

方法的检验标准:

  • 表示是否保留了因子的连续性;
  • 是否改善了底层因子的解耦;
  • 方法是否迁移了周期性、边界塌缩和非均匀延展程度;
  • 方法是否能区分拓扑等价但几何不同的空间。

结论:选择方法时,应要求检验其对连续性和解耦的保持与改善情况。仅凭统计独立性是不够的。

常问问题

因子的非欧几何:用于表征解耦的 FactoMap 地图