[논문리뷰] Matched Capabilities, Different Behaviors: A Controlled Study of MCP and CLI Interfaces for Language Agents

링크: 논문 PDF로 바로 열기

메타데이터

저자: Zhenning Shi, Liang Pang, Yongqi Li, et al.

## 1. Key Terms & Definitions (핵심 용어 및 정의)

• MCP (Model Context Protocol): 언어 모델이 도구 및 외부 환경과 상호작용하기 위해 사용하는 표준화된 인터페이스 프로토콜입니다.
• CLI (Command-line Interface): 텍스트 기반 명령어를 통해 시스템 자원이나 외부 도구를 제어하는 인터페이스 방식입니다.
• MICA (Matched Interface Comparison and Analysis): 실행 가능한 기능(executable capabilities)은 고정하되 모델이 접하는 인터페이스 표현만을 분리하여 행동 변화를 분석하는 통제된 비교 프레임워크입니다.
• DART (Decoupled Action Realization and Targeted Repair): 검증된 의미론적 결정을 보존하면서 인터페이스별 표현 오류만을 선택적으로 수정하는 복구 매커니즘입니다.
• Semantic Action Contract: 인터페이스와 독립적으로 정의된 에이전트의 동작 표준으로, 작업 수행을 위한 운영 및 인자(arguments)의 규격입니다.

## 2. Motivation & Problem Statement (연구 배경 및 문제 정의) 본 연구는 동일한 기능적 역량을 갖춘 에이전트라 하더라도, 인터페이스의 표현 방식(MCP vs CLI)이 에이전트의 의사결정과 정책(policy) 형성에 실질적인 차이를 유발한다는 문제 의식에서 출발합니다. 기존의 연구들은 도구의 입도(granularity)나 프롬프팅 방식 등 여러 변수가 혼재되어 있어, 순수하게 '인터페이스 표현' 자체가 행동에 미치는 영향을 격리하는 데 한계가 있었습니다. 에이전트가 도구를 호출할 때 인터페이스는 단순히 도구를 노출하는 통로가 아니라, 다음 행동을 선택하기 위한 결정적인 맥락(context)의 일부로 작용하기 때문에 이에 대한 체계적인 분석이 필요합니다. [Figure 1]에서 제시된 바와 같이, 동일한 의미론적 계약(semantic contract)을 사용하면서도 모델이 마주하는 표현이 다를 때 발생하는 행동 편차를 정량적으로 규명하는 것이 본 연구의 목적입니다.

Figure 1 — MICA 프레임워크의 개념과 인터페이스 구성 방식을 설명하는 핵심 다이어그램

## 3. Method & Key Results (제안 방법론 및 핵심 결과) 저자들은 MICA 프레임워크를 통해 MCP와 CLI를 동일한 의미론적 행동 계약에서 생성하도록 설계하고, 다운스트림 런타임 공유를 통해 표현 방식을 엄격하게 통제했습니다. 실험 결과, 6개의 모델과 3개의 대화형 환경에서 MCP와 CLI는 태스크 성능과 상호작용 비용(interaction cost) 측면에서 상당한 차이를 보였습니다. 특히 [Table 1]에 따르면, Qwen3-14B의 경우 ALFWorld 환경에서 MCP가 CLI보다 36.6점 낮은 점수를 기록한 반면, WebShop에서는 오히려 MCP가 4.9점 우수한 결과를 보여 환경과 모델에 따라 인터페이스 표현의 영향력이 비대칭적임을 입증했습니다. 또한 DART 기법을 적용했을 때, 모든 벤치마크 환경에서 최대 9.0점의 성능 향상을 기록했으며, 특히 MCP 환경에서 태스크당 토큰 사용량을 최대 27.1k까지 절감하는 성과를 거두었습니다. [Figure 4]는 이러한 DART의 효율성을 시각적으로 보여주며, 인터페이스 실패 시 의미론적 결정은 유지한 채 표현식만 복구하는 것이 얼마나 효과적인지 증명합니다.

Table 1 — 다양한 모델과 환경에서 MCP와 CLI의 성능 및 비용을 비교한 핵심 결과 테이블

Figure 4 — DART 기법 도입 전후의 성능 향상과 토큰 비용 절감을 보여주는 주요 결과 그래프

## 4. Conclusion & Impact (결론 및 시사점) 본 연구는 인터페이스 표현이 에이전트의 의사결정 과정을 형성하는 능동적인 구성 요소임을 학술적으로 정립하였습니다. 연구진이 제시한 MICA와 DART는 에이전트 시스템 설계자가 인터페이스를 단순한 접근 계층이 아닌, 신뢰성과 성능을 제어하는 핵심 인터벤션 경계로 다루어야 함을 시사합니다. 이러한 발견은 향후 도구 기반 에이전트 설계 시 인터페이스 디자인이 정책 형성에 미치는 구조적 영향을 깊이 고려하게 함으로써, 보다 견고하고 효율적인 에이전트 시스템 개발의 토대를 마련하였습니다.

⚠️ 알림: 이 리뷰는 AI로 작성되었습니다.