ServiceNow Research는 대형 언어 모델(LLM)이 대화형에서 자율 에이전트로 발전하고 있는 가운데, 전문적인 워크플로우를 수행할 수 있는 능력을 평가하기 위한 새로운 벤치마크인 EnterpriseOps-Gym을 발표했습니다. 현재 LLM의 기업 환경에서의 활용은 긴 계획 수립, 지속적인 상태 변화, 엄격한 접근 프로토콜 등 전문 환경의 특정 도전 과제를 반영하는 벤치마크의 부족으로 제한되고 있습니다. EnterpriseOps-Gym은 이러한 문제를 해결하기 위해 개발되었습니다. 이 벤치마크는 기업 환경에서의 에이전틱 계획을 평가하는 데 중점을 두고 있으며, 연구자들은 이를 통해 LLM의 실제 적용 가능성을 높이고자 합니다.

<Mark Tech Post 뉴스 본문 전체읽기>