AI应用上线前的安全检查应覆盖输入、模型访问的数据、工具动作和输出去向。只检查模型接口密钥,无法发现业务越权。
盘点信息流
画出资料上传、检索、模型调用和日志存储的位置。确认哪些数据会离开企业环境,对敏感资料先缩减或脱敏。
验证操作边界
用普通用户尝试管理员数据和其他部门文件,检查服务端是否拒绝。高风险写操作要求确认,并限制工具可操作的资源范围。
准备运行控制
密钥放在服务端并可轮换,限制频率与额度,设置故障回退。测试停止入口能否取消待执行动作,日志中不保存完整敏感输入。
上线清单需要有验证结果
权限、日志、敏感工具与停用入口各安排具体测试,记录账号、输入和实际返回。
危险操作默认关闭或需审批;确认客服与运维知道如何停用功能,不能只保留一份打勾表格。
例如测试账户已经停用,但旧会话仍能调用工具,说明撤权流程尚未完成,不能正式验收。
相关阅读:企业AI应用权限与审批:查询、写入和审计边界。