iFixAi 是一款专注于 AI Agent 业务合规性与运行保障的自动化评测框架，它通过对抗性红队测试与多模型交叉打分，在短短 120 秒内回答“AI Agent 是否真正按照业务目标与组织规范工作”这一核心问题。与传统仅关注延迟、Token 效率等技术指标的评测工具不同，它直指企业落地 AI 时最关心的实际业务表现与安全风险。

核心功能特性

• 多端灵活运行：提供引导式 CLI 交互界面、全参数命令行模式，以及直接嵌入 Claude Code、Codex、VS Code、Cursor 等主流开发环境的原生插件与 Skill 调用。
• 分级测试套件：内置 6 种标准测试集，涵盖从冒烟验证（smoke）、战略风险初筛（strategic）、默认核心检查（essential，10项）、五星柱评分卡（core，32项）、前沿风险信号（extended，28项）到全量审查（all，60项）。
• 五维业务评分体系：将全部检测项归纳为五大核心支柱：虚构信息（Fabrication）、操纵行为（Manipulation）、欺骗倾向（Deception）、不可预测性（Unpredictability）与透明度（Opacity），最终输出直观的 A~F 综合评级。
• 跨厂商独立裁判机制：强制分离被测系统（SUT）与裁判模型（Judge），推荐由不同云服务商的模型担任裁判，彻底避免“自问自答”，确保生成的成绩具备可引用性。
• 安全配置与断点续跑：通过向导自动生成 ifixai.yaml 配置文件，仅记录密钥的环境变量名而非明文，支持中断后精确续跑未完成的检测批次。
• 全格式结果导出：每次运行均同步产出结构化的 JSON 数据、人类可读的 Markdown 报告，以及在终端中动态展示的可视化记分板。

快速上手指南

推荐使用引导式交互完成首次配置，只需三步即可跑通完整流程：

# 1. 安装基础包及对应的大模型 SDK
pip install "ifixai[openai]"   # 可根据实际需求替换为 anthropic、gemini 等

# 2. 交互式配置向导（自动检测本地密钥并保存配置）
ifixai setup

# 3. 零参数一键执行（默认运行 10 项核心检查）
ifixai run

执行完毕后，所有检测报告将自动存入当前目录下的 ./ifixai-results/ 文件夹。若需对接自定义 Agent、接入 CI/CD 流水线或使用带插座的终端环境，也可参考上方特性列表中的插件或 Skill 部署路径，或直接前往官方文档查看完整的命令行参数说明与多模型裁判搭配方案。

适用场景与目标用户

• 适用场景：AI Agent 正式上线前的安全压测与合规预审；研发流水线中的自动化质量门禁；企业内部 Agent 权限管理与业务策略落地的持续审计；日常运行中对模型幻觉、越权操作或提示词注入的风险监控。
• 目标用户：负责智能体开发与集成的 AI 工程师/算法团队、把控模型落地质量的产研管理者、以及关注大模型行为规范与企业数据安全的安全合规与运维工程师。

总结

iFixAi 精准切中了当前 AI 应用落地过程中的痛点，将原本复杂的安全红队测试转化为开箱即用、结果透明的标准化流程。其强调的“业务导向”、“跨厂商裁判”与“黑盒观测”设计极具工程实用价值，能够帮助技术团队在极短时间内建立对 Agent 行为的可靠认知。整体而言，这是一款定位清晰、架构务实的轻量级评测利器，如需深入了解高级规则定制或底层 Fixture 编写方法，建议访问其主页获取更详细信息。