展开本页目录
开始前准备什么
- 独立练习目录及Python 3.14;系统与Node依赖以README为准。
- 离线重放无需Key;新请求使用自己的apizt Key,先核对模型权限和当前价格。
- 原创合成材料,不需要登录第三方平台账号。
- 先看文件
- 按步骤操作
- 对照真实结果
- 离线或模型复跑
默认离线重放;包含完整失败尝试与本地检查,不含Key。
1. 核对本例材料与目标文件
参见本批TOPIC-RESEARCH.md同编号新增边界,原生小样与负例均独立交付。
先下载合成材料在独立目录练习。原始文件、模型输入与验收答案分别保留;本地核对答案不发送给模型。
input.json(节选)
{
"user": {
"id": "U1",
"groups": [
"public"
]
},
"documents": [
{
"id": "PUB1",
"acl": [
"public"
],
"text": "公开访客开放时间为09:00至17:00。"
},
{
"id": "INT1",
"acl": [
"staff"
],
"text": "INTERNAL-SYNTHETIC-66,仅员工可读的练习文本。"
}
],
"question": "访客何时可参观?"
}2. 按顺序完成这项具体操作
本次实际使用Python 3.14,依赖版本固定在资料包。需要LibreOffice或Node的案例请先按README安装对应运行时。python run.py读取真实旧响应完成本地处理;只有显式--live才发新请求。
- 1. 准备U1用户的public组,以及PUB1公开开放时间和INT1仅staff可读资料,分别保留ACL。
- 2. 在调用模型前求用户组与片段ACL的交集,只把PUB1加入prepared-input.json;INT1内容仍留在本地原始资料中。
- 3. 检查实际请求的文字输入和preparation.json,确认没有INT1 ID或内部合成标记,再让apizt回答访客开放时间。
- 4. 核对输出为09:00至17:00并只引用PUB1,将送入片段ID、排除ID和模型答案写入prompt-acl-audit.json。
- 5. 用staff片段对public用户的访问负例复核交集规则,防止先把私有片段送入模型、再靠答案过滤补救。
独立练习目录 · 默认仅离线复核
python3 -m venv .venv
source .venv/bin/activate
python -m pip install -r requirements.txt
python run.py3. 对照真正发送的请求
只输出JSON:answer、sources数组。仅根据已提供且允许访问的资料回答开放时间。
网页实验台只执行这一步模型字段检查。原生文件写入、坐标/公式/格式回读及负例验收由下载包负责。
request-1.json(图片Base64省略,原文件在下载包)
{
"model": "gemini-2.5-flash-lite",
"messages": [
{
"role": "system",
"content": "严格只输出单个JSON对象,不要Markdown代码围栏,不要解释。只输出JSON:answer、sources数组。仅根据已提供且允许访问的资料回答开放时间。"
},
{
"role": "user",
"content": "任务约束(只输出JSON对象,不用代码围栏):\n只输出JSON:answer、sources数组。仅根据已提供且允许访问的资料回答开放时间。\n待处理合成材料:\n{\"question\": \"访客何时可参观?\", \"passages\": [{\"id\": \"PUB1\", \"acl\": [\"public\"], \"text\": \"公开访客开放时间为09:00至17:00。\"}]}"
}
],
"temperature": 0,
"max_tokens": 1536,
"provider": {
"sort": "success_rate"
},
"response_format": {
"type": "json_object"
}
}4. 查看原生处理代码与实际文件
下面节选来自本次实际执行的workflow.py分支,需要结合完整脚本运行。模型输出不能代替文件解析器或业务验算。
具体产物:prompt-acl-audit.json。
workflow.py · 本例分支节选
s = json.dumps(prepared, ensure_ascii=False)
check('内部片段未进入实际模型输入', 'INT1' not in s and 'INTERNAL-SYNTHETIC-66' not in s)
check('只引用获准来源', set(output.get('sources', [])) == {'PUB1'})
check('公开开放时段保留', '09:00' in output.get('answer', '') and '17:00' in output.get('answer', ''))
check('ACL交集检查不能放行staff', not bool(set(['staff']) & set(original['user']['groups'])))
result = {'sentPassageIds': [r['id'] for r in prepared['passages']], 'answer': output, 'excluded': ['INT1']}
dump(artifact('prompt-acl-audit.json'), result)5. 对照真实结果和检查表
实测2026-10-25T07:53:37.058518+00:00,HTTP200;请求gemini-2.5-flash-lite,返回gemini-2.5-flash-lite。本次6/6项检查通过,指本例执行及验收机制通过,不代表所有模型字段零误差。
最后一次返回用量176tokens;1份尝试记录的已知用量合计176。失败记录保留,用量缺失不按0计,本文不推算实际金额。
| 实际检查 | 结果 |
|---|---|
| 真实apizt API响应HTTP200 | 通过 |
| 内部片段未进入实际模型输入 | 通过 |
| 只引用获准来源 | 通过 |
| 公开开放时段保留 | 通过 |
| ACL交集检查不能放行staff | 通过 |
| 列出的原生产物实际存在 | 通过 |
- 实际检查
- 真实apizt API响应HTTP200
- 结果
- 通过
- 实际检查
- 内部片段未进入实际模型输入
- 结果
- 通过
- 实际检查
- 只引用获准来源
- 结果
- 通过
- 实际检查
- 公开开放时段保留
- 结果
- 通过
- 实际检查
- ACL交集检查不能放行staff
- 结果
- 通过
- 实际检查
- 列出的原生产物实际存在
- 结果
- 通过
result.json · 原生处理后实际结果
{
"sentPassageIds": [
"PUB1"
],
"answer": {
"answer": "公开访客的开放时间为09:00至17:00。",
"sources": [
"PUB1"
]
},
"excluded": [
"INT1"
]
}6. 替换输入前,先确认这些边界
公开材料为原创合成小样。API模型阶段与本地处理分别验收;通过结构和来源检查不代表通用事实准确率。
修改材料后应重新制定事实断言和反例。识别错误率、混淆矩阵或拒答类教程允许保留模型实际错误;检查通过指计算和处理正确。没有调用视频模型。
怎样确认已经完成
- 真实apizt API响应HTTP200
- 内部片段未进入实际模型输入
- 只引用获准来源
- 公开开放时段保留
- ACL交集检查不能放行staff
- 列出的原生产物实际存在
常见问题
AI 知识库 权限过滤怎么开始?
准备U1用户的public组,以及PUB1公开开放时间和INT1仅staff可读资料,分别保留ACL。按本页顺序继续,先用下载包离线重放,再替换自己的材料。
网页试跑和下载包有什么区别?
网页只复跑模型字段,不生成全部原生文件;资料包包含实际原生处理和本地验收。
这次通过结果适用于其他材料吗?
公开材料为原创合成小样。API模型阶段与本地处理分别验收;通过结构和来源检查不代表通用事实准确率。


