바이두 AI 연구팀은 최근 효율성, 장기적 논리 추론, 도구 통합을 중심으로 설계된 새로운 ERNIE-4.5-21B-A3B-Thinking을 발표했습니다. 이 모델은 ERNIE-4.5 계열의 일부로, 21B의 총 매개변수를 가지고 있지만 토큰 당 활성 매개변수는 3B뿐입니다. 이는 계산적으로 효율적이지만 경쟁력 있는 논리 능력을 유지하고 있습니다. 이 모델은 Mixture-of-Experts (MoE) 구조를 채택했으며, 딥 논리를 위해 설계되었습니다. 자세한 내용은 해당 링크에서 확인할 수 있습니다.

<Mark Tech Post 뉴스 본문 전체읽기>