示例随笔。示意用的占位文字,只用来展示随笔在这个网站上的样子,不代表作者观点。
问题
推荐引擎、信用模型、简历筛选器:它们都在一个人做任何事之前,就对这个人下了判断。这个判断是一个概率,概率不是指控。但随之而来的决定是真的,而被决定的那个人通常看不见推理过程。
所以问题不在于预测是否被允许——显然是允许的,我们整天都在互相预测。问题是:预测者欠被预测者什么。
三个候选答案
第一个答案是准确:模型只欠一件事,就是足够经常地猜对。这是工程师的答案,不算差。天气预报不解释自己,我们也不觉得被冒犯。
第二个答案是一个解释:如果一个决定影响到我,我就有权知道为什么。这是律师的答案。它听起来显然正确,直到你试着写下来:对一个有十亿个参数的模型,什么算得上解释?「你的分数偏低」是真话,也是废话;「第 4,812 个特征的负权重很大」很精确,而且更糟。
第三个答案是一条出路:我有权对结果提出异议,有权补上模型看不见的信息,有权被当作一个故事还没有讲完的人。我发现自己被这个答案吸引,因为它不要求模型可读,它要求的是围着模型的那个机构可读。
价格在这里的位置
市场价格也是一种对人的预测——聚合的、匿名的预测。没有人欠任何人一个解释,而这正是它能运转的原因。区别在于,价格不对我做任何决定,它只告诉我别人相信什么。第一段里的那些模型会做决定,而债,就是从那里开始的。
示例随笔。占位内容,不构成投资建议或伦理建议。