[논문리뷰] Base Models Can Reason By Taking a Cue From Training Data본 논문은 베이스 모델이 추론 능력을 발휘하는 메커니즘이, 모델 내부의 잠재적인 추론 능력보다는 학습 데이터 내에 존재하는 특정 패턴의 연상 작용에 기인한다는 가설을 증명하고자 합니다.#Review#Base Models#Reasoning#Token Cues#Reinforcement Learning#Training Data#Interpretability#Causal Intervention2026년 10월 5일댓글 수 로딩 중
[논문리뷰] The German Commons - 154 Billion Tokens of Openly Licensed Text for German Language Models이 논문은 대규모 독일어 언어 모델 개발 을 위한 오픈 라이선스 텍스트 데이터 의 심각한 부족 문제를 해결하는 것을 목표로 합니다. 기존 데이터셋의 불확실한 라이선스, 품질 문제, 그리고 비영어권 언어 데이터의 희소성을 극복하여 윤리적이고 법적 준수 가 가능한 고품질의 독일어 사전 훈련 코퍼스를 구축하고자 합니다.#Review#German Commons#Large Language Models#Training Data#Openly Licensed Text#Data Curation#German NLP#Corpus Construction#Quality Filtering2025년 10월 17일댓글 수 로딩 중