https://arxiv.org/abs/2302.10724
ChatGPT: Jack of all trades, master of none (Jan Kocoń, Igor Cichecki, Oliwier Kaszyca, Mateusz Kochanek, Dominika Szydło, Joanna Baran, Julita Bielaniewicz, Marcin Gruza, Arkadiusz Janz, Kamil Kanclerz, Anna Kocoń, Bartłomiej Koptyra, Wiktoria Mieleszczenko-Kowszewicz, Piotr Miłkowski, Marcin Oleksy, Maciej Piasecki, Łukasz Radliński, Konrad Wojtasik, Stanisław Woźniak, Przemysław Kazienko)
ChatGPT는 사람들이 알아서 테스트를 해주고 있네요. 역설적으로 이 모든 과제들의 합 조차도 범용적인 것은 아니며 역으로 이 과제 모두를 포괄하는 범용성이 얼마나 중요한 것인지를 보여주는 것 같기도 합니다. 그리고 개별 과제들의 성능은 모델에 쓰는 연산량에 따라 계속해서 나아지겠죠.
#instruct #llm