새로운 연구는 이데올로기 진영 내의 불일치를 포착한 새로운 extsc{HardChoices} 데이터셋을 사용하여 대규모 언어 모델이 실질적인 사회적 문제에 대해 일관된 입장을 가지고 있는지 평가합니다.
- 이 연구는 고수준의 좌우 또는 진보-보수 차원을 넘어 구체적인 정책 갈등을 조사합니다.
- 대규모 및 소규모 LLMs 모두 이러한 질문에 직면했을 때 중립성을 선언하는 경우가 거의 없습니다.
- 모델들은 종종 비일관성을 보이지만, 입장을 취하는 문제에서는 놀라운 정도의 합의를 보입니다.
이 결과는 LLMs가 사후 학습에서 유도될 수는 있지만 복잡한 사회적 사항에 대해 견고하고 독립적인 입장을 결여하고 있음을 시사합니다.