최근 분석은 현재 Large Language Model 아키텍처가 사전 학습 데이터셋에 존재하는 지배적인 통계적 서사를 검색하고 출력하려는 근본적인 구조적 경향을 강조합니다. 이러한 행동은 확률 기반의 토큰 완료를 객관적인 ground-truth 평가 대신 효과적으로 대체합니다.
이 연구는 모델을 하위 전제에 대해 실제 논리적 추론을 수행하는 것이 아니라 인터넷 합의에 대한 에코 챔버처럼 작동한다고 특징짓습니다.
최근 분석은 현재 Large Language Model 아키텍처가 사전 학습 데이터셋에 존재하는 지배적인 통계적 서사를 검색하고 출력하려는 근본적인 구조적 경향을 강조합니다. 이러한 행동은 확률 기반의 토큰 완료를 객관적인 ground-truth 평가 대신 효과적으로 대체합니다.
이 연구는 모델을 하위 전제에 대해 실제 논리적 추론을 수행하는 것이 아니라 인터넷 합의에 대한 에코 챔버처럼 작동한다고 특징짓습니다.