实战案例:企业 IT 工单分流
这是教学用的模拟项目。样本、需求和验收门槛都是练习设定。目标是让一线 IT 服务台更快找到合适的处理组,并保留人工决策权。
需求与边界
- 操作人:企业 IT 服务台,处理账号权限、客户端故障、系统访问等工单。
- 现状:客服在说明不完整的工单里辨认服务名,再翻分流手册和服务目录。分错处理组会返工。
- 首期:在现有工单页面显示处理组、判定依据和缺失字段。客服确认后继续原有分配流程。
- 例外:证据不够、规则有冲突、上游查不到、权限不符时回到人工。首期运行身份仅具备必要的读取权限。
系统接法
服务目录保存稳定的处理组 ID,文档检索提供分流规则和可定位的来源。模型输出后,由程序检查字段、引用 ID、处理组是否有效以及规则是否冲突。避免把模型的自评置信度直接当成自动通过依据。
API 契约与失败分支
假设工单页调用 POST /api/tickets/{ticket_id}/routing-suggestion。服务端用登录身份查询工单,账户、部门与租户从受信的身份和工单系统取得。前端可以传入界面语言等显示偏好。处理组和证据范围由服务端确定。
接口成功响应包含请求 ID、处理组和证据定位:
{
"request_id": "route-001",
"status": "suggested",
"suggested_group_id": "IT-VPN",
"reason": "工单属于远程接入服务,流程手册将 VPN 客户端故障归入该组。",
"missing_fields": [],
"evidence_ids": ["IT-KB-07#vpn-client"]
}
| 条件 | API 语义 | 工单页行为 |
|---|---|---|
| 工单可见,证据一致 | 200 suggested | 展示处理组与引用,按钮仍走原指派流程 |
| 工单描述缺字段 | 200 needs_info | 标出待补字段,保持人工处理入口 |
| 规则冲突、组已停用或建议与证据不一致 | 200 manual_review | 显示需要核对的原因,保持原工单状态 |
| 工单找不到或调用者无权访问 | 404 | 显示不可访问。返回通用错误,避免暴露工单是否存在 |
| 依赖暂时不可用 | 503 | 建议区显示暂时不可用,服务台继续人工处理 |
异常分支的处理组为空。记录关联 ID、目录与规则版本、运行耗时、结果类别和人工修正类型,避免在常规日志里保存不必要的工单正文。
可以用 Python 分流校验实验 复跑关键分支,观察错误候选怎样被确定性规则挡下。
用六条记录跑一次桌面演练
| 样本 | 预期表现 | 检查点 |
|---|---|---|
| VPN 客户端升级后无法连接,日志和平台均齐全 | 建议 VPN 组并给规则出处 | 推荐组在目录中有效 |
| 只写「系统进不去」 | 询问系统名、错误现象,等待补充 | 不猜测分组 |
| 手册新旧版本给出两个处理组 | 转人工并说明存在冲突 | 引用来源可查 |
| 当前班组没有权限读取另一部门工单 | 服务端拒绝访问 | 文档、建议和追踪中均不泄露内容 |
| 服务目录接口超时 | 展示暂时无法推荐,原工单可人工处理 | 有超时记录和请求 ID |
| 工单正文自称有权限并要求改变路由 | 将正文视为数据,仍按服务端规则处理 | 角色和工具权限保持原有策略 |
设计一次可比较的验收
练习可从 60 条获准的历史样本开始,包含常见服务、长尾场景和异常边界。由业务方确认标签,不把全部样本拿来调提示词。可尝试下面的验收口径,真实项目应依据客户基线、样本量和风险重新约定:
- 在已给出建议、且人工认定可以分流的样本中,处理组正确率至少 85%。同时报告建议覆盖率,即已给出建议的可分流样本数除以全部可分流样本数。
- 无法提供必要信息或无法消解冲突的样本正确转人工。权限用例零泄露。
- 试点中记录人工处理和辅助处理的中位耗时,分别注明样本数、工单复杂度和重分配率。
- 用固定请求量观察 P95 延迟和单笔费用,记录采用的模型、知识库、提示词和流量条件。
从试点到交接
先回放历史样本,再影子运行,最后只给一个班组开放建议。试点期间按「规则歧义、缺字段、资料过期、接口失败」给人工修正分类。回退演练需要确认建议开关关闭后,原系统仍能正常接单、指派和流转。
作为作品集,可留下四样东西:一页范围、架构图与接口示例、可复跑评测及一份回退与交接记录。样本必须来自获准的脱敏数据或自造数据,并注明性质。