1. 基本信息
| 项目 | 内容 |
|---|---|
| 名称 | arize-ai-provider-integration |
| 作者/维护者 | Arize AI(GitHub 官方组织,LLM 可观测性平台厂商) |
| 来源链接 | https://github.com/Arize-ai/arize-skills/tree/main/skills/arize-ai-provider-integration |
| 许可证 | MIT(GitHub API 获取) |
| GitHub Stars / Forks | 47 / 8(GitHub API 获取;为 arize-skills 合集仓库整体数据,非本子技能个体热度,取证方式见第 6 章说明) |
| 最新版本 | SKILL.md 内声明 version 1.0;仓库整体 Release v1.2.0(2026-07-30,统一发版) |
| 安装方式 | npx 一键安装 / git clone / ax CLI / Claude Code 插件市场(见第 9 章) |
2. 功能介绍与亮点
arize-ai-provider-integration 管理 Arize 平台里的 AI Integration——即注册进 Arize、供评估器(evaluator)和其他需要调用 LLM 的功能使用的第三方大模型供应商凭据。它是评估器技能 arize-evaluator 能正常调用“裁判模型”的前置配置能力。
- 覆盖全部主流供应商:OpenAI、Anthropic、Azure OpenAI、AWS Bedrock、Vertex AI、Gemini、NVIDIA NIM 及任意 OpenAI 兼容自定义端点,每种供应商都给出对应的创建命令与所需参数
- 完整 CRUD:创建、查询(含按名称模糊筛选与分页)、更新(部分更新,只改传入的字段)、删除四类操作全覆盖
- 凭据处理有明确护栏:SKILL.md 明确写明“绝不读取
.env文件或在文件系统中搜索凭据”“绝不要求用户把密钥粘贴进对话”——推荐做法是把ax ai-integrations create命令原样交给用户,让用户在自己的终端里导出环境变量后自行执行,仅当变量已存在于当前会话时才由 Agent 直接运行 - 认证方式多样:支持
DEFAULT(供应商原生 API Key)、PROXY_WITH_HEADERS(自定义请求头代理)、BEARER_TOKEN三种鉴权类型,并支持限制某个集成可用的模型列表与可见空间范围(scoping) - 附带独立的排障参考文档(
references/ax-setup.md、references/ax-profiles.md)与故障对照表,覆盖 CLI 未安装、401 未授权、集成找不到等常见问题
3. 适用场景
所属分类:工程效率与代码质量(为 LLM 应用的评估/测试流水线配置底层模型调用凭据,产出服务于代码评测环节,与同仓库 arize-evaluator/arize-experiment/arize-dataset 等判例一致)。
已经在用 Arize 做 LLM 应用可观测性、准备接入或调整 arize-evaluator 的 LLM 裁判模型的团队,可以用它一条命令注册好供应商凭据,而不必手动翻 Arize 控制台的多层菜单;也适合需要按环境(测试/生产)或按团队空间隔离不同供应商密钥的场景。
4. 跨 Agent 兼容性
- Claude Code:✅ 原生支持——仓库 README 明确点名,
ax skills install --agent claude-code --yes与 Claude Code 插件市场(/plugin marketplace add Arize-ai/arize-skills)均为官方专门提供的安装路径 - Codex:✅ 原生支持——README 明确点名,
npx skills add与ax skills install --agent codex均支持 - OpenClaw:✅ 原生支持——README 未直接点名,但官方推荐的通用安装器
npx skills(vercel-labs/skills)官方支持列表中明确包含 OpenClaw(对应安装路径~/.openclaw/skills/),核验来源:vercel-labs/skills 仓库文档 - Hermes Agent:✅ 原生支持——同上,
npx skills官方支持列表明确包含 Hermes Agent(对应安装路径~/.hermes/skills/)
技能本体是标准 SKILL.md + Markdown 参考文档,不含任何 agent 专属逻辑,四个生态均可正常加载。
5. 推荐理由
它把“给 Arize 接一个 LLM 供应商”这件事从翻控制台、对照文档拼 API 参数,变成一条按供应商类型套用的命令,且把凭据处理的安全实践(不读 .env、不要求粘贴密钥进对话)直接写进了操作规范里,而不是留给使用者自己把关。对已经用 Arize 做评估/追踪、需要频繁切换或新增 LLM 供应商的团队,这是比手动操作更不容易出错的配置方式。
6. 评分
| 维度 | 分数 | 说明 |
|---|---|---|
| 受欢迎程度 | 7 | 官方出品(Arize AI 自身产品的技能化);合集仓库整体 47 stars,该数字属整个合集,不代表本技能自身热度;GitHub issue 区与网络检索均未发现该子技能自身的独立第三方讨论 |
| 可用性 | 8 | 文档详尽(含完整供应商参数表、认证类型说明、独立排障参考文档),近期持续维护(最近一次提交 2026-08-28),支持 npx/git clone/ax CLI/插件市场四种安装路径;但需已安装 ax CLI 并配置好 Arize 账号与 profile,非零配置即用 |
| 安全性 | 8 | 见下方检查清单,管理第三方 LLM 供应商密钥这类敏感凭据,但有明确、可核查的处理护栏 |
| 综合 | 7.67 | 三项均值,≥ 7.0 达标线 |
安全检查清单:
① 有 shell 命令执行——通过 ax ai-integrations 子命令创建/更新/删除凭据记录,权限范围限定在本技能描述的凭据管理操作内,无越权;
② 联网外发目标透明——仅与 Arize 自身平台通信,不产生额外第三方外发;
③ 直接处理第三方 LLM 供应商 API Key/凭据,但存储方式明确(写入 Arize 侧的 integration 记录,而非本地明文文件),且 SKILL.md 明确禁止读取 .env、禁止要求用户把密钥粘贴进对话,推荐用户在自己终端导出变量后自行执行创建命令;
④ 未发现可疑指令或注入迹象;
⑤ Arize AI 为已获融资的 LLM 可观测性厂商,官方 GitHub 组织出品,信誉良好;
⑥ MIT 许可证,权利义务清晰;
⑦ 持续维护中——18 次提交、6 位作者,时间跨度 2026-03-23 至 2026-08-28。
7. 跟同类 Skills 相比的优势
| 技能 | 定位 | 与本技能的差异 |
|---|---|---|
| arize-admin(同仓库) | 管理 Arize 用户、组织、空间、角色、权限限制与账号级 API Key,面向企业管理员的账号治理 | 覆盖面更广但需 org-admin/account-admin 权限,受众窄于普通使用者;本技能只管 LLM 供应商凭据,任何需要配置评估器的用户都可能用到 |
| arize-evaluator(同仓库) | 创建并运行“LLM 作裁判”的评估流程 | 是本技能的下游消费者——评估器要调用的裁判模型正是靠本技能注册的凭据来配置;本技能不做评估本身,只做前置的供应商接入 |
| 各 LLM 厂商官方 SDK 的密钥配置文档(如 OpenAI/Anthropic 各自的快速开始指南) | 教你在自己的代码里直接用 SDK 读取环境变量调用模型 | 面向“我自己的应用要调用某一个供应商”;本技能面向“Arize 平台要在评估器/其他功能里代表我调用某个供应商”,凭据注册在 Arize 侧集中管理,而非分散在各处代码里 |
8. 用户评价
该技能目前在第三方平台尚无具名用户评价。其所属的 Arize Skills 合集有官方博客文章(2026 年 3 月发布)介绍设计思路与安装方式,但该文章发布时只列出六个早期技能(trace 导出、埋点接入、数据集管理、实验执行、prompt 优化、UI 链接生成),未包含本技能。
9. 安装使用方式
- npx(推荐):
npx skills add Arize-ai/arize-skills --skill arize-ai-provider-integration --yes - git clone:
git clone https://github.com/Arize-ai/arize-skills.git,进入目录后运行./install.sh --project <你的项目路径>(Windows 用install.ps1) - ax CLI(需先安装
ax):ax skills install --agent claude-code --yes(--agent可换成 codex / openclaw / hermes-agent 等) - Claude Code 插件市场:
/plugin marketplace add Arize-ai/arize-skills后/plugin install arize-skills@arize-skills
安装后需已配置好 ax CLI 与 Arize profile(ax profiles show 可检查当前配置);无需重启 Agent,下一轮对话中直接描述“帮我给 Arize 接一个 OpenAI/Anthropic 的评估凭据”即可触发。首次创建供应商凭据时,Agent 会把带占位符的命令原样交给用户在自己终端里执行,不会代为处理明文密钥。
10. 注意事项
- 需要一个已有的 Arize 账号与已配置好的
axprofile 才能使用;不含 Arize 账号本身的开通流程 - 部分供应商(AWS Bedrock、Vertex AI)走 IAM 角色/服务账号鉴权而非 API Key,需要额外准备云端权限配置,不是纯“贴一个 Key 就行”
- 凭据一旦创建,
provider字段不可更改,供应商填错需删除重建,而非直接更新 - 子技能自身自 2026-03-23 起持续迭代(18 次提交、6 位作者),迭代节奏活跃,但尚未见独立第三方对该技能本身的评测或案例分享