“人在回路”的治理幻觉
在当前的AI治理讨论中,存在一种普遍且危险的思维定势:每当有人提出关于人工智能做出高风险决策的担忧时,回应者往往只需轻描淡写地表示“不用担心,我们有‘人在回路’(Human in the Loop)”,房间里的紧张气氛便会随之缓解。这种回应看似提供了安全保障,但实际上掩盖了治理的深层缺陷。“人在回路”并不等同于系统受到有效治理,在大多数情况下,它甚至可能起到相反的作用。当我们声称“有人工审核”时,通常指的是一个人在AI输出进入公共领域前对其进行查看。这听起来很合理,但我们需要深入追问:人类在审核时究竟看到了什么? 简单的“AI生成-人工审查-决策”流程掩盖了人类认知过程中的关键缺失,使得这种机制沦为一种形式主义的安慰剂。
“When we say a human reviewed it, what we usually mean is a person will look at the AI's output before it goes into the world. That sounds good, but here's what I've learned. A human reviewed, it is not the same as the system being governed.”
信任的五维映射模型
要理解人类审核的本质,必须引入人际信任的五个核心维度:可信度(Credibility)、可靠性(Reliability)、依赖性/可预测性(Dependability)、自我导向(Self-orientation)和正直度(Integrity)。在信任他人判断时,我们依赖的是他们是否基于真实证据、推理是否可预测、方法是否正确以及动机是否纯粹。这五个维度可以精确映射到AI系统的治理属性上:
- 可信度对应透明度(Transparency):我们需要知道模型训练的数据来源、方法论以及这些选择是否经过验证。
- 可靠性对应可解释性(Explainability):我们需要理解为什么模型在今天对特定用户产生了特定的输出。
- 依赖性对应可观测性(Observability):特别是在Agentic AI中,必须确认系统在条件变化时是否仍能正确运行。
- 自我导向对应算法优化目标(Algorithm Optimization):必须明确模型究竟为谁的利益进行了何种优化。
- 正直度对应抗对抗性(Robustness against adversaries):必须验证模型是否遭受篡改,保持其原有的可信状态。
这五个属性缺一不可。只有当所有五个维度都得到满足时,人类的介入才具有实质性的治理意义;否则,所谓的“审核”只是盲目的点击。
“Credibility maps to transparency... Reliability maps to explainability. Dependability maps to observability... Self-orientation maps to algorithm optimization. And integrity? That maps to robustness against adversaries.”
人类独有的情境感知能力
尽管上述五个维度至关重要,但“人在回路”之所以有价值,是因为它引入了模型无法复制的核心能力:对情境的阅读(Reading Circumstances)。人类不仅仅是处理数据,而是能够识别“案卷讲述的故事”与“一个人真实生活故事”之间的差异。这种能力超越了单纯的数据输出,触及决策对个体生命的实际影响。人类审核者的核心价值在于提问:“这个决定对这个人在这种生活背景下意味着什么?” 而不仅仅是“输出内容是否正确”。
长期以来,社会工作者、伦理学家、历史学家和咨询师等专业人士被边缘化,被认为其专业知识“不够技术化”,无法在技术决策中发挥作用。然而,当我们构建影响数百万人生活的系统时,却恰恰遗忘了那些研究人类生活本身的人。这种专业领域的排斥导致了技术决策与社会现实之间的巨大断裂,使得系统虽然高效,却缺乏对人性的深刻理解。
“The human in the loop brings something no model replicates. The ability to read circumstances, not just data... To ask not just what does this output say? But what does this decision mean for this person in this life?”
治理的实质:可见性、权力与反馈
因此,当我们宣称拥有“人在回路”时,必须进行严格的自我审视:我们是否真正具备了治理所需的四个关键要素?
- 可见性(Visibility):人类是否能看到模型的推理过程,而不仅仅是最终结果?
- 权力(Authority):人类是否有权停止流程,而不仅仅是被动接受?
- 正确的测量指标(Right Measurement):评估标准是否准确反映了风险和影响?
- 反馈循环(Feedback Loops):是否有机制将人类的纠正转化为系统的改进?
如果缺乏这些要素,我们只是在计算“暖身体”(Warm Bodies),即仅仅依靠人力数量来冒充治理质量。真正的治理始于一个能看到推理过程、有权叫停流程,并能带来模型无法复制的情境智慧的人类。
“So, when you say you have a human in the loop, ask yourself if you actually have all four. Visibility, authority, the right measurement, feedback loops... It's a starting point.”
结论
“人在回路”本身并不是一个完整的AI治理策略,它只是一个起点。真正的治理要求我们将人类介入从简单的“结果审核”升级为基于信任五维度(透明度、可解释性、可观测性、优化目标明确性、抗篡改能力)的系统性评估。同时,必须重新引入那些被技术圈忽视的社会科学和人文学科专家,利用他们独特的情境感知能力来弥补纯数据驱动的盲区。只有当人类拥有可见性、决策权力和有效的反馈机制时,“人在回路”才能从一种形式主义的安慰剂转变为实质性的治理力量。
“A human who can see the reasoning, stop the process and bring what no model replicates, that is the beginning of one.”