第一階段－百花齊放下的 Self-Supervised Learning

InstDisc 首次提出個體判別的代理任務(pretext task)，如果說 MOCO 是站在巨人的肩膀上 的話，InstDisc 就是那巨人的肩膀，InstDisc 就是 MOCO 中反覆提到的文獻[61]。除了 MOCO 以外，還有很多其他的論文和實驗的細節都是直接根據 InstDisc 而來的。 圖 1 展示了 InstDisc…