Nema Veil
Nema Veil
- 版本
- 3.0.0
- 基础
- GLiNER2(mDeBERTa-v3)
- 运行
于 - Nema
位于 欧盟 的 服务器
它 识别 什么
Veil
它 在 哪里 运行
Veil
基准 测试
使用
| 指标 | Veil 2.0 | Veil 3.0 |
|---|---|---|
| 泄漏真实 | 6(0.6%) | 5(0.5%) |
| 误入 | 375(23.8%) | 90(5.7%) |
| 误 | 6.6 | 1.7 |
| 过度 | 9.0% | 2.9% |
| 精确 | 89.2% | 90.2% |
| 计算 | ≈ 930 毫秒 | ≈ 920 毫秒 |
在
截至 2026 年 10 月 23 日
我们 如何 测量
- 自建
测试 集 - 测试
集 由 我们 自己 编写, 依据 的是 Crew 中 会 出现 的 各类 文本。 它 不 公开, 也不是 独立 测试。 - 固定
的 发布 规则 - 只有
当 新 版本 在 总体 和 每个 类别 中的 泄漏 都不 多 于 旧版 本、 误入 陷阱 的 次数 最多 为 旧版 本 的 一半、 且 误 识别 不多 于 旧版 本 时, 才 会 上线。 - 不
依赖 词表 - Veil
根据 上下文 识别, 而不是 依据 固定 的 人名 或 品牌 列表。 每个 组织 在 Crew 中 自行 维护 自己 的 词条。
它的 局限
- Veil
并 不能 识别 所有 内容: 在 基准 测试 中, 大约 每 200 处 信息 就有 一 处 漏掉。 漏掉 的 内容 会 原样 发出。 - 我们
只 测量 了 德语 和 英语, 其他 语言 没有 数据。 - 部分
阈 值 是 参照 第二 套 测试 集 调整 的, 因此 它 已 不再 完全 未 被 使用。 - Veil
仍 会 把 一些 知名 品牌 当作 客户 的 公司, 例如“Amazon Web Services”。