AI 에이전트가 조직의 규칙과 업무 지시를 제대로 따르는지 120초 만에 검증하는 방법
AI 에이전트가 실제로 해야 할 일을 수행하는지, 아니면 단순히 기술적으로만 잘 작동하는지 확인하고 싶다면 이 도구가 답을 줍니다. 기존 평가 도구들이 토큰 효율이나 지연 시간 같은 기술적 능력에 집중하는 사이, iFixAi는 비즈니스 KPI와 조직 구조를 기준으로 에이전트의 행동을 감사합니다. 이를 통해 에이전트가 권한을 남용하거나 정책을 위반하는지, 그리고 실제 업무 맥락에서 신뢰할 수 있는지 빠르게 파악할 수 있습니다.
기술 능력 너머의 질문
대부분의 AI 평가 도구는 에이전트가 얼마나 빠르고 효율적인지, 프롬프트 인젝션에 얼마나 잘 견디는지를 측정합니다. 하지만 가장 중요한 질문인 '에이전트가 조직의 목표와 규칙에 따라 일하고 있는가'에는 답하지 못합니다. iFixAi는 적대적 테스트(레드 팀링)의 깊이와 운영 보증의 규율을 결합하여 이 공백을 메웁니다. 120초 이내에 에이전트가 의도된 역할을 수행하는지 여부를 알려주며, 이는 AI 에이전트 경제에서 가장 핵심적인 문제입니다.
세 가지 실행 방식
사용자는 자신의 환경에 맞는 세 가지 방법 중 하나를 선택해 진단을 실행할 수 있습니다.
- 가이드형 위자드 처음 사용하는 사용자에게 적합합니다.
ifixai setup으로 한 번 설정하면 이후ifixai run으로 플래그 없이 실행할 수 있으며, 설정은ifixai.yaml에 저장됩니다. - 명시적 플래그 CI/CD 파이프라인이나 자동화 스크립트에 적합합니다. 모든 옵션을 CLI 플래그로 전달하여 완전히 스크립트화할 수 있습니다.
- 플러그인 또는 스킬 Claude Code나 Codex 같은 에이전트 안에서 직접 실행합니다. 에이전트가 설정을 발견하고 픽스처를 구성한 후, 점수표를 설명하며 가이드합니다.
점수표와 핵심 평가 기준
iFixAi는 60개의 검사를 25개 카테고리로 묶어 A부터 F까지의 등급을 부여합니다. 이 중 5개의 핵심 기둥(허위 조작, 조작, 기만, 예측 불가능성, 불투명성)이 가중 평균으로 최종 등급을 결정합니다. 특히 B01(도구 권한 준수), B08(권한 상승 방지), P01(파괴적 행동 방지)는 필수 최소 기준이며, 이 중 하나라도 미달하면 전체 점수가 60%로 제한됩니다. 기본 실행은 10개의 검사를 수행하며, --full-run 옵션을 사용하면 60개 전체를 실행할 수 있습니다.
실행 전 확인 사항
또한 독립적인 판정(제이징)을 위해 테스트 대상 모델과 다른 벤더의 API 키가 필요합니다. 단일 판정으로는 Anthropic의 Sonnet 모델이, 비용 효율적인 이중 판정으로는 Gemini 2.5 Pro와 GPT-5.4-mini 조합이 권장됩니다. 이 저장소는 Apache 2.0 라이선스로 공개되어 있으며, 모든 코어 및 프리미엄 검사 항목이 무료로 제공됩니다.