🏆40

챌린지: ReAct vs 단순 Agent 비교 실험

Day 3: ReAct 에이전트

요구사항

Day 1의 단순 Agent와 Day 3의 ReAct Agent를 동일한 질문으로 비교한다

최소 5가지 질문(단순 1, 복합 2, 엣지케이스 2)으로 테스트한다

각 질문별 Tool 호출 횟수, 정확도, 응답 시간을 기록한다

비교 분석 보고서를 작성한다

평가 기준
  • ReAct Agent의 Thought가 논리적인가?
  • 불필요한 Tool 호출이 줄어들었는가?
  • 복합 질문에서 정확한 순서로 Tool을 호출하는가?
  • 정량적 비교(호출 횟수, 정확도)를 수행했는가?
  • 개선 포인트를 구체적으로 식별했는가?
보너스
  • Token 사용량까지 비교한 경우
  • 현장 엔지니어 5명 이상의 실제 질문으로 테스트한 경우
  • ReAct 프롬프트를 3회 이상 반복 개선(A/B 테스트)한 경우