决策引擎演示:判断自建还是采购
安排演示的会上,工程师说授信规则不过是几条 if 判断,IT 一个迭代周期就能把引擎做出来。下个月,供应商会演示各自的系统,工程师提出的方案听起来却简单得多。第一次共享屏幕之前,就得想清楚要看什么。
确认谁能修改并发布授信策略
先从修改阈值开始看决策引擎演示。以 Decisimo 为例,风控团队修改授信策略,运行测试和影响分析,再自行发布变更。发布可以设置审批顺序,部署到 API 接口前需要取得签署。
询问风控分析师能否不找开发人员、不提工单,就修改并发布阈值。还要问发布需要哪些审批。重点是确认谁能修改策略,以及放贷机构如何控制发布。
保存前先查看变更
请对方先展示保存前的差异,再比较两个版本。Decisimo 的租赁示例展示了新增和修改的行,其中包括押金数值的变更。
规则返回决策只是评估工作的一部分,变更也需要信贷同事能够审阅。阈值变更如果要经过开发人员,并生成授信代码,信贷团队就没人会阅读生成的代码。差异对比能让审阅人看清改了什么。
用过去的决策回放拟议规则
请供应商用拟议规则重新运行上个季度的决策,并列出发生变化的决策。Decisimo 冠军/挑战者测试演示展示了影响分析工具的结果。
| 指标 | 演示数据 |
|---|---|
| 回放的决策数 | 1,001 |
| 从批准变为拒绝 | 30 |
关联实际结果后,演示还给出了各结果单元的实际坏账率。团队可以据此结合观察到的结果评估发生变化的决策,而不只是看回放数量。
根据决策记录中的版本解释决策
选一笔八个月前的决策,询问当时运行的是哪个授信策略版本、用了哪些输入、命中了哪条规则。Git 提交记录能显示代码改动,但要解释某笔申请的决策,放贷机构还需要知道当时使用的版本、输入和规则。
以 Decisimo 为例,每笔决策都会记录实际运行的组件修订版本,以及输入值的来源,包括未找到输入值的情况。已保存的发布快照会保留旧决策所用的规则,即使授信策略之后经过修改也不会改变。
确认结果存储和运行方式
询问结果存在哪里、规则如何导出,以及可以在哪里运行。以 Decisimo 为例,结果可以写入放贷机构自有的 Postgres 或 Supabase 数据表,规则可以导出为 Markdown 文件。决策可以通过部署在各区域的实时 API 接口运行,也可以通过 FTP、S3 和 GCS 批量运行。
如果放贷机构不再使用该供应商,结果仍保存在自有的 Postgres 或 Supabase 中,决策规则也可以导出为 Markdown 文件。
按相同的决策量比较价格
先确认供应商的计量方式统计哪些决策,再比较当前业务量和业务量达到三倍时的价格。Decisimo 的价格方案按生产环境中执行的决策计费。批量处理时每条记录都计为一次决策,每次决策使用的规则、数据源或模型数量不影响计数。
| 指标 | 业务量 | 价格 |
|---|---|---|
| 标准月度方案 | 包含 50,000 次决策 | €500 起 |
| 额外决策 | 超出包含额度的每次决策 | 每次 €0.01 |
| 标准方案,每月 50,000 次决策 | 50,000 次决策 | €500 |
| 标准方案,每月 150,000 次决策 | 150,000 次决策 | €1,500 |
只有双方报价对决策的定义相同,价格比较才有意义。除了总价,也要核对计量方式。
用供应商演示中的项目检验自建方案
自建规则引擎本身是成本较低的部分。请工程团队演示阈值变更从提出到发布的过程,说明信贷审阅人如何查看差异,并用过去的决策回放拟议变更。然后请他们根据决策记录中的版本和输入解释一笔旧决策。第一条规则运行后,维护工作还会继续:征信机构的 API 可能变更,模型也可能需要替换,因此要问每项变更如何审阅和回放。规则评估只是自建方案的一部分。
每场演示都用同一套检查项
用这些检查项比较各家供应商和自建方案。
- 请供应商演示由风控分析师修改并发布一个阈值,不需要开发人员,也不需要提工单。询问发布需要哪些审批。
- 请对方展示保存前的差异,再比较两个版本。
- 请对方用拟议规则重新运行上个季度的决策,并列出发生变化的决策。
- 选一笔八个月前的决策,询问当时使用了哪个版本、哪些输入和哪条规则。
- 询问结果存在哪里、规则如何导出,以及可以在哪里运行。
- 确认价格计量方式,再比较当前业务量和业务量达到三倍时的价格。
- 请自建团队演示同样的变更、审阅、回放和决策记录工作,并说明征信机构的 API 变更或模型替换时如何处理。
关于决策引擎演示的常见问题
决策引擎演示应该重点看什么?
确认谁能修改并发布阈值、审阅人能否在保存前查看差异、拟议规则能否回放、旧决策能否根据当时运行的版本进行解释、结果和规则存在哪里,以及价格如何随业务量变化。请供应商逐项演示。
放贷机构应该自建决策引擎还是采购?
自建规则引擎本身是成本较低的部分。生成的授信代码没有信贷团队的审阅人,征信机构的 API 变更或模型需要替换时,也仍然需要有人维护。请自建团队和供应商演示如何满足同样的要求。
为什么 Git 记录不足以解释授信决策?
Git 记录的是代码变更。要解释某笔决策,放贷机构还需要知道当时运行的授信策略版本、输入和规则。询问系统如何记录这些信息。
业务量增长时如何比较决策引擎的价格?
先询问计量方式统计哪些内容,再比较当前业务量和业务量达到三倍时的报价。两个报价要使用相同的决策定义,并确认批量处理的记录如何计数。