https://arxiv.org/abs/2205.10183
Prototypical Calibration for Few-shot Learning of Language Models (Zhixiong Han, Yaru Hao, Li Dong, Furu Wei)
in context learning에서 출력 결과를 바로 쓰는 대신 확률을 추출한 다음 gmm을 피팅해서 나온 클러스터를 사용해 예측하는 모델. 추가적인 unlabeled sample을 사용했다는 것과 모델이 커지면 효과가 감소한다는 점이 보이긴 하네요.
#in_context_learning