OpenMythos: 770M 매개변수로 1.3B 트랜스포머를 재현한 오픈소스 프로젝트
OpenMythos는 Claude Mythos 아키텍처를 이론적으로 재구성하기 위한 야심찬 오픈소스 프로젝트입니다. Kye Gomez가 GitHub에 공개한 이 프로젝트는 PyTorch를 기반으로 하여, 770M의 매개변수로 1.3B 트랜스포머와 일치하는 구조를 목표로 하고 있습니다. Anthropic은 Claude Mythos에 대한 기술 논문을 발표한 적이 없지만, 연구 커뮤니티는 이를 바탕으로 다양한 이론을 제시해왔습니다. OpenMythos는 이러한 이론을 바탕으로 실제 아키텍처를 재구성하려는 시도를 하고 있습니다.
출처: Mark Tech Post
요약번역: 미주투데이 김지호 기자