Contrastive Learning 对比学习 | InfoNCE loss 与互信息的数学关联 - MoonOut

Wait 5 sec.

【摘要】参考博客:CSDN | 【理论推导】互信息与 InfoNCE 损失:从公式推导理解对比学习的本质 ,感觉是讲的最清楚的一个博客。 目录1 InfoNCE loss 和互信息的数学形式1.1 互信息的数学形式1.2 InfoNCE loss 的数学形式1.3 为什么我们希望最大化 \((X,Y)\) 阅读全文