什么是 AIQuality HQ
想象一下:你的团队花了几周精心设计了一套 Prompt,结果推上生产环境后,AI 的输出完全"放飞自我"——客户看到了不该看到的信息、回答了不该回答的问题。你开始手动调试,一遍又一遍地修改措辞,却始终抓不住问题根源。
代码领域早已有 linter、静态分析工具、单元测试来保障质量,但 Prompt 工程长期处于"盲飞"状态。团队花费大量时间调试 Prompt,依赖主观判断,或者花钱请 LLM 来"评审"——结果今天改好了,明天换个模型又出问题了。
AIQuality HQ 就是来填补这个空白的。它是一个完全在浏览器中运行的确定性 Prompt 质量分析平台,无需安装、无需注册、无需发送任何数据到服务器。
它的核心思路很直接:不使用 AI 模型来评审 AI 的输入,而是用一套确定的规则引擎来检查 Prompt 的结构、记忆、上下文、准确性、隐私和安全问题。相同输入永远返回相同输出,不存在模型随机性,平均分析时间不到 10 毫秒。
这套工具已经被 Best-AI.org、Toolhunter、FutureStore、DANG.ai、AI Agents Directory 等 60 多个 AI 工具目录收录和推荐。
- 确定性分析引擎:相同输入始终返回相同结果,零随机性
- 六维度评分体系:从结构、记忆、上下文、准确性、隐私、安全全面评估
- 零数据外传:所有分析在浏览器本地完成,数据不出设备
- CI/CD 集成:CLI、REST API、GitHub Actions 一键接入
- 免费使用:核心功能完全免费,无需注册
你的团队真正需要的协作功能
AIQuality HQ 不是那种"看起来很酷但用不上"的工具。它的每个功能都对应一个真实痛点。
确定性 Prompt 质量引擎:速度与可靠性的平衡
你用它来做什么?把任何 Prompt 粘贴进去,几毫秒内就能拿到一份质量诊断报告。
这个引擎采用三阶段流水线:先做词法分析,把 Prompt 拆解成可识别的结构元素;然后进入规则评估阶段,对照六维度规则集逐项检查;最后进行分数聚合,输出 0-100 的总分和详细的诊断报告。
关键在这里:它是确定性的。这意味着你今天测、明天测、换了台电脑测,同一个 Prompt 的评分完全一致。不会因为模型版本更新、API 调用波动导致结果飘忽不定。而且性能随 Prompt 长度线性扩展,典型的分析时间在 10 毫秒以内。
六维度评分体系:知道哪里扣了分
你可以用它来快速定位 Prompt 的薄弱环节。评分体系覆盖六个维度:
- Prompt Structure(20%):角色边界是否清晰?结构分隔符是否规范?
- Memory & State(15%):是否合理管理上下文记忆?
- Context Grounding(20%):Prompt 是否基于可靠的参考材料?有文档引用和变量插值吗?
- Trust & Accuracy(25%):权重最高,评估输出的准确性和可信度
- PII & Privacy(10%):有没有意外暴露电子邮件、API Key、密码?
- Security & Safety(10%):是否有 Injection 漏洞或越狱风险?
总分 0-100,90 分以上才算"生产就绪",70-89 建议改进,50-69 需要关注,低于 50 属于高风险。
AI Auditor:当确定性检查还不够的时候
有时候,规则引擎能告诉你"格式有问题",但说不清"语义上哪里别扭"。这时候 AI Auditor 就派上用场了。
它使用你自有的 LLM API Key(支持 OpenAI、Anthropic、Google、Groq、Perplexity、OpenRouter 的 200+ 模型、HuggingFace 等),对 Prompt 进行深层语义分析,评估清晰度、结构、安全、上下文和格式五个维度,并直接生成优化版本。
流程上建议这样做:先用确定性引擎做快速检查(免费、<10ms),通过的 Prompt 再用 AI Auditor 做深度审计。分层保障,既省钱又全面。
安全威胁与隐私泄露检测:把风险挡在生产环境之外
如果你的 Prompt 会直接面向客户,这一步绝不能省。
AIQuality HQ 会自动扫描 Prompt Injection 向量——比如"忽略之前指令"这类攻击模式;检测 越狱模式,包括 DAN 风格的前缀攻击、角色升级尝试;识别 系统指令锁绕过 风险;还会标记 Prompt 中嵌入了电子邮箱地址、API Key 模式、密码和令牌等隐私泄露点。
CI/CD 集成:让质量检查成为流水线的一环
手动检查总有疏漏,最好的方式是把检查嵌入开发流程。
你可以用 npm install -g @aiqualityhq/cli 安装 CLI 工具,加上 --ci 标志,检查不通过就直接退出非零码,阻止低质量 Prompt 合入主分支。也可以通过 REST API(POST https://api.aiqualityhq.com/v1/check)做编程式调用,或者在 GitHub Actions 中配置 workflow,支持 glob 匹配自动检查。
对于 Node.js/TypeScript 团队,还有 SDK 可以直接集成。
- 零服务器依赖:所有分析在浏览器本地完成,不依赖后端
- 确定性输出:相同输入始终返回相同结果,可重复可验证
- 免费核心功能:无限次完整六维度分析,无需注册
- 隐私安全:Prompt 数据不离开设备,适合受监管行业
- 付费版定价页面(/pricing)返回 404 错误,价格信息不够透明
- AI Auditor 需要用户自有 LLM API Key,不能直接开箱即用
谁在使用 AIQuality HQ
不同的团队在使用 AIQuality HQ 时,切入点和用法各不相同。看看你的角色有没有在上面的列表里。
AI 工程师与 Prompt 工程师
痛点是:每次 PR 审核 Prompt 全靠肉眼,漏过了问题上线就炸锅。
他们怎么做:把 AIQuality HQ 的 CLI 集成到 CI/CD 流水线,每次 PR 自动检查所有 .prompt 文件。检查不通过就直接阻止合并,每天自动执行数千次检查,零 API 成本零依赖。
QA 测试团队
痛点是:生产环境中的 AI 输出质量不稳定,出了问题才去排查。
他们怎么做:在部署前对 Prompt 模板做一次完整的六维度检查,自动捕获 Injection 漏洞、角色定义缺失和结构问题。上线前先过了质量门槛,生产环境中的 AI 安全事件大幅减少。
安全团队
痛点是:AI 应用的安全风险太隐蔽,Prompt Injection、越狱攻击防不胜防。
他们怎么做:用 AIQuality HQ 系统化扫描 Prompt Injection 向量、DAN 风格越狱前缀、系统指令泄露风险。把安全检测纳入 Pre-merge 流程,从源头阻断风险。
医疗、金融、法律行业团队
痛点是:Prompt 中包含大量敏感数据,绝不允许发送到外部服务器。
他们怎么做:所有分析在浏览器中完成,数据不出设备。即使离线也能运行质量检查。适合 HIPAA、GDPR 等合规要求严格的工作流程。
学生与研究人员
痛点是:学习 Prompt 工程缺乏量化反馈,不知道自己的 Prompt 写得好不好。
他们怎么做:用六维度评分框架获得结构化的改进建议。AI Auditor 的详细分析就像一位专业导师,帮你理解高质量 Prompt 的关键要素,加速学习曲线。
如果你的团队注重隐私合规,或者需要将质量检查嵌入 CI/CD 流水线,AIQuality HQ 的浏览器端架构和 CLI 工具是理想选择。如果需要纯 AI 驱动的语义审查,建议搭配 AI Auditor 功能一起使用——先用确定性引擎过滤,再对通过的 Prompt 做深度审计。
快速开始:三种方式上手
AIQuality HQ 的上手门槛几乎为零。根据你的工作方式,选一种就行。
方式一:浏览器端使用(最快上手)
访问 https://aiqualityhq.com/checker,把你的 Prompt 粘贴进去,点击检查,几毫秒后就能看到六维度评分和修复建议。
无需注册、无需 API Key、不产生任何费用。 所有分析都在你的浏览器本地完成,分析结束后关掉页面,不留任何痕迹。
方式二:命令行与自动化集成
如果你习惯在终端工作:
npm install -g @aiqualityhq/cli
aiqualityhq check my-prompt.txt --ci
--ci 标志会在检查不通过时退出非零码,方便集成到 CI/CD 流水线。
GitHub Actions 用户可以直接配置 workflow,支持 glob 匹配自动检查仓库中的 Prompt 文件。
方式三:REST API 调用
curl -X POST https://api.aiqualityhq.com/v1/check \
-H "Authorization: Bearer YOUR_TOKEN" \
-H "Content-Type: application/json" \
-d '{"prompt": "你的 Prompt 内容"}'
适合需要编程式集成的场景。
AI Auditor 深度审计
如果你需要更深层次的语义分析,注册免费账户后,配置你自有的 LLM API Key(支持 OpenAI、Anthropic、Google、Groq、OpenRouter 等),即可使用 AI Auditor 功能。AI 会评估 Prompt 的清晰度、结构、安全、上下文和格式,并生成优化版本。
建议在 CI/CD 流水线中先用确定性引擎做快速检查(<10ms),对通过的 Prompt 再用 AI Auditor 做深度审计。这个分层策略既能保证速度,又能覆盖规则引擎无法识别的语义边界情况——经济又全面。
常见问题
我的 Prompt 数据是否隐私安全?
是的。质量引擎完全在浏览器中使用客户端 JavaScript 处理所有 Prompt。没有 Prompt 文本、分析结果或个人数据传输到我们的服务器或任何第三方。这种架构使其安全适用于医疗、金融、法律等受监管行业的专有 Prompt。
这和让 ChatGPT 审查 Prompt 有何不同?
与基于 LLM 的审查不同,AIQuality HQ 使用确定性规则,对相同输入始终产生相同评分。没有模型随机性、没有 API 成本、没有 Prompt 被用作训练数据的风险。分析在 <10ms 内完成,可离线运行,可集成到 CI/CD 流水线中。
质量引擎如何分析 Prompt?
引擎在浏览器中执行本地确定性规则算法。这些规则评估角色边界、结构分隔符、指令特异性、输出模式指南等,在 <10ms 内完成分析。采用三阶段流水线:词法分析 → 规则评估 → 分数聚合。
质量引擎评估哪些维度?
引擎从六个维度评分:Prompt Structure(20%)、Memory & State(15%)、Context Grounding(20%)、Trust & Accuracy(25%)、PII & Privacy(10%)、Security & Safety(10%)。每个维度基于确定性本地规则评分(0-100),加权得出总分。90-100 分为生产就绪,70-89 建议改进,50-69 需要关注,0-49 为高风险。
能否集成到 CI/CD 流水线?
可以。支持多种集成方式:CLI 工具(npm install -g @aiqualityhq/cli)加 --ci 标志,REST API(POST https://api.aiqualityhq.com/v1/check),GitHub Actions 工作流,以及 Node.js/TypeScript SDK。可以在 git 审查阶段直接阻止 Prompt 质量回归。
AIQuality HQ 是免费的吗?
是的。免费版(Free Tier)提供无限的浏览器端 Prompt 检查,包含完整六维度分析,无需付费。付费版(Premium plans)增加云端存储、团队协作和自定义规则定义(具体价格在网站上暂未公开)。AI Auditor 需要免费账户 + 用户自有 LLM API Key。
质量引擎是开源的吗?
浏览器端质量引擎作为专有 SDK 提供,并非开源。为保持透明度,部分规则定义已发布在文档中。自定义规则定义在团队版中可用,用户可定义维度权重、添加自定义 pass/fail 标准、设置组织特定阈值。
AIQuality HQ
在浏览器中运行的AI提示词质量分析引擎


评论