基于光分量分离的稳健像素分类方法研究
参考文献：Robust Pixel Classification for 3D Modeling with Structured Light (2007 GI)
在使用结构光系统进行三维建模时，如何准确、稳健地对像素进行分类，即判断一个像素是被投影仪直接照亮（"亮"）还是未被直接照亮（"暗"）。
现实世界场景中存在复杂的光照和表面属性，特别是强烈的间接光照效应（如相互反射、次表面散射等），使得传统的"被直接照亮的点总是比未被照亮的点更亮"假设失效。
计算机图形学、虚拟现实、历史遗迹保护等领域的研究人员和从业者，特别是使用基于二进制编码图案的结构光系统的用户。
当结构光系统向场景投影一系列图案并拍摄图像时，在解码每个像素的编码之前，必须先完成对每张图案图像的像素分类。
在包含复杂物体和光照交互的真实世界场景中，尤其是在具有显著间接光照效应的场景，比如有角落、凹陷结构或由不同材质物体组成的场景。
利用光分量分离技术，首先分离出每个像素的直接光分量(d)和总间接光分量(i_total)，然后基于这两个分量为每个像素估算其在不同状态下的亮度区间。
新算法显著提升了三维重建的数量和质量。实验表明，与传统方法相比，新算法重建的点数平均多出2到7倍，并且重建出的点云噪点更少，质量更高。
基于分离得到的光分量，算法使用以下判断条件对每个像素进行分类：
| 判断条件 | 分类结果 | 可靠性 | 物理含义 |
|---|---|---|---|
d < m |
不确定像素 | 不可靠 | 直接光分量过小，无法准确判断 |
d > i_total ∧ p > p̄ |
ON状态 | 可靠 | 直接光强且正向图案更亮 |
d > i_total ∧ p < p̄ |
OFF状态 | 可靠 | 直接光强但反向图案更亮 |
p < d ∧ p̄ > i_total |
OFF状态 | 可靠 | 正向暗且反向亮于间接光 |
p > i_total ∧ p̄ < d |
ON状态 | 可靠 | 正向亮于间接光且反向暗 |
| 其他情况 | 不确定像素 | 不可靠 | 条件不明确，避免错误分类 |
将观察到的像素亮度分解为两个分量：
使用一组高频的二进制结构光图案及其对应的反向图案，通过对称测量策略直接提取光学分量。
设P为像素在图案中的理想状态（1为亮条纹，0为暗条纹）：
通过数学运算得到：
最终分离结果：
使用8个不同相位的正弦波图案，通过相移测量技术和傅里叶分析提取光分量。
Cₖ 不是直接的正弦波！它是包含直接光、间接光、环境光等多种成分的复合信号。 8步相移法的目的就是从这8个实际测量值中反推出理论模型的参数 d 和 i_total。
利用8步相移的正交性质：
从测量值到物理参数的求解：
方案1：已知投影参数
如果已知投影图案的A和B（通常可通过投影仪标定获得）：
方案2：归一化假设（代码实现）
假设投影图案归一化：A = 0.5, B = 0.5 或 A = 0, B = 1：
最终分离结果（实际代码实现）：
注意：实际实现中假设投影图案已归一化(B=1)且采用简化的光传输模型。
| 比较维度 | 高频互反格雷码 | 8步相移法 |
|---|---|---|
| 测量次数 | 2次曝光 | 8次曝光 |
| 计算复杂度 | 简单差值运算 | 傅里叶分析 |
| 测量精度 | 中等精度 | 高精度 |
| 噪声鲁棒性 | 一般 | 优秀 |
| 实时性 | 优秀 | 一般 |
| 运动敏感性 | 低敏感 | 高敏感 |
| 高频处理 | uncertain区域多 | 边界更平滑 |
| 额外信息 | 仅光分量 | 同时获得相位 |
在实际应用中，可以考虑混合使用两种方法：
该论文首次提出了基于光分量分离的稳健像素分类方法，解决了传统结构光系统在复杂间接光照环境下的分类失效问题。
在多种复杂场景下验证了算法的有效性，包括强间接光照、不同材质表面、复杂几何结构等场景。结果显示重建点云数量提升2-7倍，质量显著改善。
这项工作为后续结构光三维重建研究奠定了重要基础，特别是在处理复杂光照环境方面。其提出的光分量分离思想被广泛应用于各种结构光系统中。