[논문리뷰] PluginRSI: Recursive Improvement of Agent Harnesses with Reusable Plugins

링크: 논문 PDF로 바로 열기

메타데이터

저자: Yaorui Shi, Yuchun Miao, Yuxin Chen, Jiayuan Zhang, Yueqing Sun, Xierui Song, Xiang Wang, An Zhang

---

1. Key Terms & Definitions (핵심 용어 및 정의)

• Harness: LLM 기반 에이전트가 환경과 상호작용하기 위해 사용하는 툴, 스킬, 메모리, 역할 등을 조직화하는 시스템 구조를 지칭함.
• Plugin-Parameterized Harness: 각 기능을 표준화된 인터페이스를 가진 독립적인 Plugin으로 구성하고, 이를 워크플로우에 따라 조합하여 에이전트 동작을 제어하는 방식임.
• Plugin Mutation: 특정 에이전트 기능을 수행하는 단일 Plugin의 구현을 독립적으로 변경하고 테스트하여 성능을 최적화하는 과정임.
• Harness Recomposition: 라이브러리에 누적된 개선된 Plugin들을 선택하고 워크플로우를 재구성하여 새로운 성능의 Harness를 생성하는 단계임.

2. Motivation & Problem Statement (연구 배경 및 문제 정의)

본 논문은 LLM 에이전트의 반복적인 성능 향상을 위해 수행되는 기존 Harness 최적화 방식의 한계점을 해결하고자 한다. 기존의 반복적인 Harness 재작성(Iterative rewriting) 방식은 전체 Harness를 하나의 프로그램으로 다루기 때문에 개별 메커니즘을 독립적으로 분리하거나 재사용하기 어렵다는 치명적인 단점이 있다 [Figure 1]. 이러한 방식은 새로운 메커니즘 발견을 저해하고, 이전 반복 과정에서 발견된 효과적인 로컬 메커니즘들이 재작성 과정에서 소실되는 결과를 초래한다. 결과적으로 지속적인 에이전트 성능 개선이 정체되는 현상을 방지하고, 메커니즘 발견과 재사용 중심의 효율적인 최적화 프레임워크가 필요하다.

Figure 1 — 기존 방식과 PluginRSI 비교

3. Method & Key Results (제안 방법론 및 핵심 결과)

본 논문은 메커니즘의 독립성과 재사용성을 극대화하기 위해 Plugin 기반의 PluginRSI 알고리즘을 제안한다. PluginRSI는 두 단계의 최적화 루프를 통해 에이전트 기능을 점진적으로 발전시킨다 [Figure 2]. 첫째, Plugin Mutation 단계에서는 전체 시스템을 고정한 상태로 특정 Plugin만 변형하여 성능을 평가하고, 성능 향상이 확인된 Plugin을 공유 라이브러리에 축적한다. 둘째, Harness Recomposition 단계에서는 축적된 Plugin들을 전략적으로 결합하고 워크플로우를 수정하여 더욱 고도화된 Harness를 구축한다. 실험 결과, SWE-bench Verified 벤치마크에서 기존 최고 성능 대비 GPT-5.6 Terra 사용 시 10%, Kimi-K3 사용 시 6% 향상된 해결률(Resolve Rate)을 기록했다 [Table 1]. 또한, 최적화된 Harness는 다른 모델로 전이(Transfer)되어도 성능 우위를 유지하며, 더 적은 Solver Rollout으로도 더 빠르게 수렴하는 효율성을 입증했다 [Figure 3].

Figure 2 — PluginRSI 전체 프레임워크

4. Conclusion & Impact (결론 및 시사점)

본 논문은 Harness를 단순히 하나의 거대한 코드로 보는 대신, Plugin의 집합체로 정의함으로써 에이전트 성능의 지속적이고 누적적인 개선을 가능케 했다. PluginRSI는 단순한 성능 향상을 넘어, 발견된 지식과 메커니즘을 라이브러리 형태로 축적하고 재사용하는 새로운 연구 패러다임을 제시한다. 이 연구는 복잡한 소프트웨어 엔지니어링이나 전문적인 QA 과업에서 에이전트가 환경에 최적화된 구조를 능동적으로 찾아가게 함으로써, 향후 대규모 에이전트 시스템 설계 및 자율 최적화 분야에 중요한 이정표가 될 것으로 기대된다.

⚠️ 알림: 이 리뷰는 AI로 작성되었습니다.