Demos de motores de decisiones: comprar o desarrollar

En la reunión para agendar las demos, un ingeniero dice que las reglas de crédito son apenas unos cuantos if y que el equipo de TI podría desarrollar el motor en un sprint. El próximo mes, los proveedores mostrarán sus sistemas y el ingeniero espera una respuesta a una propuesta que parece mucho más sencilla. Antes de la primera presentación, usted debe decidir qué conviene evaluar.

Evalúe quién puede cambiar y publicar la política

Empiece la demo del motor de decisiones con un cambio de umbral. En el ejemplo de Decisimo, el equipo de riesgos modifica la política, ejecuta pruebas y analiza el impacto, y luego publica el cambio. El release puede incluir una secuencia de aprobaciones, y el despliegue en un endpoint espera la firma correspondiente.

Pregunte si un analista de riesgos puede cambiar un umbral y hacer el release por cuenta propia, o si debe solicitarlo a un desarrollador mediante un ticket. Pregunte qué aprobación requiere ese release. Así podrá evaluar quién puede cambiar la política y cómo controla la entidad su release.

Revise los cambios antes de guardarlos

Pida que le muestren el diff antes de guardar y luego comparen dos releases. El ejemplo de arrendamiento de Decisimo muestra filas agregadas y modificadas, incluido un cambio en el valor del depósito.

Que una regla devuelva una decisión es solo una parte de la evaluación. También hace falta que un colega del área de crédito pueda revisar el cambio. Si un desarrollador gestiona el cambio de umbral y genera el código de crédito, nadie del equipo de crédito lee el código producido. El diff permite ver qué cambió.

Vuelva a ejecutar la lógica propuesta con decisiones anteriores

Pida a cada proveedor que vuelva a ejecutar las decisiones del último trimestre con la lógica propuesta y enumere cuáles cambian. La demo de champion y challenger de Decisimo muestra los resultados de su analizador de impacto.

MétricaDato demo
Decisiones reejecutadas1,001
De approve a decline30

Al cruzar los resultados observados, la demo también informó las tasas de incumplimiento reales de cada celda de resultados. Así, el equipo puede evaluar los cambios a partir de los resultados observados y no limitarse a contar las decisiones reejecutadas.

Explique una decisión con la versión registrada

Elija una decisión de hace ocho meses. Pregunte qué versión de la política se ejecutó, qué datos de entrada utilizó y qué regla se aplicó. Un registro de commits documenta cambios en el código. Para una solicitud concreta, la entidad necesita conocer la versión, los datos de entrada y la regla que sustentaron la decisión.

En el ejemplo de Decisimo, cada decisión registra las revisiones de los componentes que se ejecutaron y el origen de los datos de entrada, incluso cuando no se encontró un valor. La copia guardada de un release conserva la lógica que se usó para una decisión anterior, aunque la política se edite después.

Integre estas comprobaciones en un flujo de decisión

Cree reglas de crédito, fraude o cobros y ejecútelas en decisiones en tiempo real.

Revise dónde se guardan los resultados y dónde puede ejecutarse la lógica

Pregunte dónde se guardan los resultados, cómo se exporta la lógica y dónde puede ejecutarse. En el ejemplo de Decisimo, los resultados pueden escribirse en una tabla en el Postgres o Supabase de la propia entidad, y la lógica se exporta como archivo Markdown. La ejecución puede realizarse en endpoints regionales en tiempo real o por lotes mediante FTP, S3 y GCS.

Si la entidad deja de trabajar con el proveedor, los resultados permanecen en su propio Postgres o Supabase y puede exportar la lógica de decisiones como archivo Markdown.

Compare los precios con el mismo volumen de decisiones

Averigüe qué decisiones cuenta el medidor del proveedor y compare el precio con el volumen actual y con un volumen tres veces mayor. Las condiciones de precios de Decisimo cuentan las decisiones ejecutadas en producción. Cada registro de un lote cuenta como una decisión, y la cantidad de reglas, fuentes o modelos que se utilizan no aumenta el conteo.

MétricaVolumenPrecio
Plan mensual estándar50,000 incluidosDesde €500
Decisiones adicionalesCada decisión por encima del volumen incluido€0.01 cada una
Plan estándar con 50,000 decisiones al mes50,000 decisiones€500
Plan estándar con 150,000 decisiones al mes150,000 decisiones€1,500

La comparación de precios sirve cuando ambas cotizaciones usan la misma definición de decisión. Revise cómo se calcula el volumen, además del total.

Compare la propuesta interna con las demos de proveedores

Desarrollar el motor de reglas es la parte barata. Pida al equipo de ingeniería que explique cómo se gestiona un cambio de umbral desde la solicitud hasta el release, que muestre cómo un revisor de crédito lee el diff y que vuelva a ejecutar la lógica propuesta sobre decisiones anteriores. Después, pídales explicar una decisión anterior a partir de la versión y los datos de entrada registrados. El trabajo continúa después de ejecutar la primera regla: una API de un buró de crédito puede cambiar y quizá haya que sustituir un modelo. Pregunte cómo se revisa y se vuelve a ejecutar cada cambio. El motor que evalúa las reglas es solo una parte de la propuesta.

Aplique las mismas pruebas en todas las demos

Use estas pruebas para comparar a los proveedores con la propuesta interna.

  1. Pida al proveedor que un analista de riesgos cambie un umbral y haga el release, sin desarrollador ni ticket. Pregunte qué aprobación requiere el release.
  2. Pida ver el diff antes de guardarlo y luego compare dos releases.
  3. Pida volver a ejecutar las decisiones del último trimestre con la lógica propuesta y obtener la lista de las que cambian.
  4. Elija una decisión de hace ocho meses y pregunte qué versión la tomó, con qué datos de entrada y qué regla aplicó.
  5. Pregunte dónde se guardan los resultados, cómo se exporta la lógica y dónde puede ejecutarse.
  6. Confirme qué cuenta el medidor de precio y compare el volumen actual con el triple.
  7. Pida al equipo interno que demuestre el mismo trabajo de cambio, revisión del diff por un revisor de crédito, reproducción de decisiones y registro de decisiones, incluido qué ocurre cuando cambia una API de un buró de crédito o se sustituye un modelo.

Preguntas sobre las demos de motores de decisiones

¿Qué conviene evaluar en una demo de motor de decisiones?

Evalúe quién puede cambiar y publicar un umbral, si un revisor puede leer el diff antes de guardar, si es posible volver a ejecutar la lógica propuesta, si se puede explicar una decisión anterior con la versión que se ejecutó, dónde se guardan los resultados y la lógica, y cómo varía el precio según el volumen. Pida al proveedor que demuestre cada punto.

¿Conviene desarrollar un motor de decisiones internamente o comprarlo?

Desarrollar el motor de reglas es la parte barata. El código de crédito generado no tiene un revisor del área de crédito, y alguien debe mantenerlo cuando cambia una API de un buró de crédito o hay que sustituir un modelo. Pida al equipo interno y a los proveedores que demuestren cómo resolverían los mismos requisitos.

¿Por qué el historial de Git no basta para explicar una decisión de crédito?

El historial de Git registra cambios en el código. Para explicar una decisión concreta, la entidad también necesita conocer la versión de la política, los datos de entrada y la regla que se ejecutaron. Pregunte cómo registra el sistema esa información para cada decisión.

¿Cómo comparar los precios de un motor de decisiones cuando aumenta el volumen?

Pregunte qué cuenta el medidor y compare el precio cotizado para el volumen actual con el de un volumen tres veces mayor. Use la misma definición de decisión en ambas cotizaciones y confirme cómo se cuentan los registros de los lotes.

Integre estas comprobaciones en un flujo de decisión

Cree reglas de crédito, fraude o cobros y ejecútelas en decisiones en tiempo real.