AI Proyectos Cálculo de ROI

Métricas de impacto

Las métricas de impacto de la solución de inteligencia artificial a implementar.

Las métricas de impacto son la forma de medir cómo la implementación de una solución de IA mejora el resultado de una tarea dentro de un proceso de negocio. 


Cada tarea dentro de un proceso puede tener indicadores clave de rendimiento (KPI) en términos de eficacia y / o en términos de eficiencia.
    • Los KPI de eficacia miden la calidad (por ejemplo, el número de fallos por período) o el alcance del resultado de la tarea (número de clientes repetidos en un período).
    • Los KPI de eficiencia miden el esfuerzo requerido para lograr un cierto nivel de eficacia en el resultado. Continuando con nuestros ejemplos, podrían ser ahorros en el presupuesto de control de calidad necesario para lograr X número de fallas; o ahorros en recursos humanos comerciales para mantener la tasa de repetición de compra de los clientes.

La unidad de resultado de la tarea es el valor de la métrica en dos puntos diferentes en el tiempo, antes de implementar la solución de IA y después de implementar la solución de IA. En nuestro ejemplo, el número de clientes habituales antes de la implementación de la solución era, por ejemplo, 100, mientras que después de la implementación se convierte en 150 para el mismo período de tiempo.

Las tareas Indicadores clave de rendimiento (KPIs).

A continuación, proporcionamos algunas definiciones de KPIs:
Una medida cuantificable utilizada para evaluar el éxito de una organización, empleado, etc. en el cumplimiento de los objetivos de rendimiento". - Diccionario de Oxford

"Un conjunto de mediciones cuantificables utilizadas para medir el rendimiento general a largo plazo de una empresa". - Investopedia 


KPI, or key performance indicators, are measurable values used to evaluate how successful a person or organization is in reaching a target. You can have high-level KPIs that look at the performance of your business, or KPIs that drill down into processes at the individual or departmental level, too.

De acuerdo con lo anterior, los KPI que utilizaremos para medir el impacto de la solución IA cuando se aplique a una tarea específica son KPI de bajo nivel. Cada proceso tiene una meta, cada tarea dentro del proceso tiene su propio y específico objetivo (tal vez un conjunto de ellos). El KPI de Tareas es la medida principal del Desempeño de la Tarea, la métrica que nos permite saber qué tan efectiva y eficiente es su ejecución en un período.

KPIs y métricas.

Dentro de una tarea, puede haber diferentes métricas que miden aspectos parciales del desempeño de la tarea. Cuando hablamos del KPI de la tarea, nos referimos a aquella medida que nos dice exactamente dónde estamos respecto al objetivo principal de esa actividad.


Veamos un ejemplo:
   





Dependencia de Resultados de la Tarea

Como dijimos antes, la Unidad de Resultado de la Tarea es el valor de la métrica en dos puntos diferentes en el tiempo, antes de implementar la solución de IA y después de implementar la solución de IA. 

A veces las métricas se expresan en porcentajes. Para que podamos calcular el rendimiento de una inversión en IA, necesitamos expresar la mejora en la Unidad de Resultados de la Tarea de la métrica en un número que pueda convertirse en un valor en euros de la mejora. En nuestro ejemplo anterior, pasar de un resultado de 100 clientes habituales a 150, gracias a la solución de IA, implica una mejora del 50% en la métrica de "compra repetida". Para utilizar estos datos en el cálculo de devolución, tendré que multiplicar otra métrica, la "compra media por periodo", digamos un valor de 1.000 €, por el número de nuevos clientes recurrentes, 50.

Si se tratara de una métrica de Eficiencia, estaríamos en un caso similar. Supongamos que para lograr una compra recurrente del 10% de mis 2.000 clientes al año, necesito el trabajo de tres vendedores. Supongamos también que con una solución de IA de asistente robótico para la compra, logro el mismo resultado con un solo vendedor. Para calcular la mejora en la Unidad de Resultados de la Tarea, tendré que tener en cuenta el costo promedio de un vendedor por año, digamos € 30,000, y al ahorrar dos con la solución de IA, la mejora es de € 60,000.

Pregunta reflexiva

En su opinión, lo que va a impactar más fuerte, en el empleo en todos los sectores de una manera negativa:


  • Contribuciones de eficacia de las soluciones de IA para mejorar los procesos de negocio
  • Contribuciones de eficiencia de las soluciones de IA para mejorar los procesos de negocio

Por favor, comente con su respuesta.

Ejercicios

exercise_multiple_choice

Vea este video sobre EFICACIA y EFICIENCIA y responda a las preguntas

¿Cuál es el orden correcto?

Si queremos mejorar el resultado de un proceso de manera consistente, primero es necesario asegurarnos de que lo resolvemos correctamente y obtenemos lo que necesitamos. Entonces es el momento de mejorar la calidad de lo que logramos, lo que significa el aumento del nivel de eficacia de la solución del problema o de la gestión del proceso.
Finalmente, cuando la posibilidad de mejorar la eficacia es nula o muy baja, es el momento de optimizar potenciando la eficiencia, es decir, la relación entre los recursos utilizados y los resultados obtenidos.

Ejercicio: Arrastrar y Soltar

Asociar los KPI a cada tipo de KPI

Bolsas por minuto en máquina de envasado
Aceptación del cliente en el proceso de lanzamiento del producto.
Precisión en milímetros en el proceso de corte
Porcentaje de chatarra en una línea de fabricación
Tiempo dedicado a arreglar el ticket de soporte de la categoría de TI
Tiempo de comercialización en el desarrollo de productos.
Estabilidad de la temperatura del aceite en una máquina de freidora
Fallos por minuto
KPI de eficacia
KPI de eficiencia
Cuando el KPI (Key Performance Indicator: indicador clave) afecta a la eficiencia del proceso, mejora la relación entre los recursos utilizados en el proceso y la cantidad de salida obtenida (bolsas por minuto que puede producir la máquina empacadora).
Cuando el KPI afecta a la eficacia, quiere decir que no obtenemos más cantidad de salida (obtenemos las mismas bolsas por minuto), sino que lo que mejora es la calidad de la salida (ratio de bolsas sin fugas en el marco del número de bolsas cerradas por minuto).
Algunas soluciones pueden afectar a ambos componentes de la producción del proceso, la eficacia y la eficiencia, lo que significa que, al aumentar la cantidad de bolsas cerradas por minuto, obtenemos menos bolsas que no se cierran correctamente.
Erasmus logo
El apoyo de la Comisión Europea para la producción de esta publicación no constituye una aprobación del contenido, el cual refleja únicamente las opiniones de los autores, y la Comisión no se hace responsable del uso que pueda hacerse de la información contenida en la misma.
cookieLas cookies nos ayudan a prestar nuestros servicios. Al utilizar nuestros servicios, aceptas el uso