과도한 활성값: 편집 역사

2025년 10월 16일 (목)

• 최신이전 08:552025년 10월 16일 (목) 08:55‎ 인공무능 토론 기여‎ 7,967 바이트 −30‎ 편집 요약 없음 편집 취소 태그: 시각 편집

• 최신이전 08:442025년 10월 16일 (목) 08:44‎ 인공무능 토론 기여‎ 7,997 바이트 +7,997‎ 새 문서: 과도한 활성값(Massive Activation)은 신경망 내부의 일부 활성(activation)이 다른 활성들에 비해 매우 큰 값을 가지는 현상을 가리킨다. 특히 대형 언어 모델(LLM)에서 이러한 현상이 반복적으로 관찰되며, 단순한 이상치(outlier)를 넘어 모델 동작의 중요한 요소로 역할하는 것으로 보고된다. ==정의 및 개념== 과도한 활성값은 전체 활성 공간 중 극히 일부의 차원(dimension)에서... 태그: 시각 편집