Costos y valor / 6 minutos de lectura

¿Está funcionando tu piloto? Cómo medir el rendimiento de un Digital Employee

Evalúa el tiempo, la calidad, las excepciones y la supervisión con una línea de base comparable, un ejemplo trabajado y evidencia para continuar, corregir o detener su piloto.

Un piloto está funcionando cuando produce resultados aceptables dentro del alcance acordado y mejora el trabajo sin ocultar errores ni trasladar la carga a los revisores. Compara casos similares antes y durante el juicio, incluya supervisión y excepciones, y acuerde de antemano qué evidencia respalda la continuación, corrección o interrupción del proyecto.

Cuándo termina

12 expedientes hipotéticos: 7 listos, 3 con documentos pendientes y 2 con derivaciones sin resolver. Ninguna derivación cuenta como terminada; «listo» no significa «aprobado».

Decide qué pregunta debe responder el piloto.

“La demostración es convincente” y “este proceso nos funciona” son conclusiones diferentes. Un juicio puede demostrar que un paso es técnicamente posible sin establecer cuánto trabajo queda con el equipo o qué tan difíciles se manejan los casos. Anota la decisión que quieres tomar: continuar con la misma tarea, corregir parte del flujo de trabajo o suspenderlo.

Primero defina un caso completado correctamente: el resultado esperado está disponible, se pueden verificar las fuentes, se finalizan las revisiones y se confirma el estado final. Un artículo procesado por software no es automáticamente un entregable aceptado. Acuerda quién evalúa el resultado, eligiendo a alguien que comprenda el trabajo y pueda cuestionar el resultado.

La documentación de casos de prueba, métricas y herramientas de evaluación es consistente con MEDIDA 2.1 en el NIST IA RMF 1.0. La siguiente hoja es una propuesta práctica, no una prueba de certificación.

Construya una línea de base que haga que la comparación sea justa

Observa el proceso existente utilizando los mismos puntos de inicio y finalización que la prueba. Registra el número, los tipos y la complejidad de los casos: una semana de solicitudes estándar no representa un período que contenga disputas y registros incompletos. Si no puede mantener la misma combinación, separe los grupos y explique la diferencia en lugar de comparar dos promedios únicamente.

Distinguir el tiempo de trabajo activo de una persona, el tiempo de espera y el tiempo total transcurrido desde la solicitud hasta la entrega. Un caso puede requerir sólo unos minutos de trabajo y esperar días porque falta una fuente. Reducir la primera medida no establece que la segunda haya mejorado.

Utiliza el mismo criterio de aceptación y punto de observación para los resultados completados. Mostrar casos destacados, exclusiones y correcciones posteriores. Un denominador formado únicamente por casos exitosos esconde un trabajo inconcluso. la guía sobre preparando tu primer proyecto ayuda a establecer este límite antes de comenzar a recolectar figuras.

La hoja de medición: datos, titular y decisión

Complete los criterios con el propietario antes del juicio. Estas indicaciones describen cómo decidir; no prescriben umbrales universales. Especifique qué errores impiden la continuación incluso si mejora el tiempo medio de gestión.

Desplácese por la tabla horizontalmente para leer cada columna.

Métricas piloto y condiciones a acordar
MétricaFuente y propietarioContinuar, corregir o detener
Volumen y complejidadLista de casos que muestra llegadas, exclusiones y trabajos pendientes por tipo; contacto operativo.Continúe si la muestra cubre la tarea. Corrija la muestra si faltan variaciones. No generalice a casos no observados.
tiempo humano totalElaboración, revisión, excepciones y supervisión registradas sin duplicación; coordinador del equipo.Continuar si el esfuerzo es sostenible y respalda el objetivo. Corrija los pasos que transfieren demasiado trabajo a los revisores.
Tiempo de espera y transcurridoMarcas de tiempo de llegada, bloqueo, reanudación y aceptación; responsable del proceso.Esperas correctas sin dueño. Detenga el paso afectado si el trabajo bloqueado se presenta como completado.
Aceptación de la primera revisiónResultado de la revisión inicial y motivos del rechazo; revisor de la función relevante.Comparar con el criterio acordado. Si no se cumple corregir el proceso antes de ampliar su alcance.
Errores y trabajo repetidoRegistro de corrección, gravedad y tiempo requerido; dueño de la calidad del proceso.Corrija los defectos repetibles y pruebe nuevamente. Suspender por los errores críticos definidos en el plan, aunque sean poco frecuentes.
Intervenciones humanasNúmero, motivo y resultado de las solicitudes de ayuda; propietario de excepción.Distinguir las intervenciones planificadas de los fracasos. Si la cola no se puede manejar de manera sostenible, corrija o reduzca la asignación.
Costo por caso aceptadoCostos abarcados y recuento de casos aceptados para el mismo período; Financiación con el responsable del proceso.Continúe sólo con una comparación completa. Corregir el cálculo antes de una decisión económica si faltan costes o casos abiertos.

Un ejemplo práctico: una preparación más rápida puede necesitar más revisión

Se inventan las siguientes figuras para explicar el cálculo; no son resultados de Digital Employee. Consideremos dos conjuntos comparables de 100 casos, cada uno de los cuales contiene 80 casos ordinarios y 20 con excepciones. Los 100 casos de cada conjunto han sido aceptados después de realizar correcciones, y el tiempo humano se cuenta solo una vez.

Desplácese por la tabla horizontalmente para leer cada columna.

Ejemplo ilustrativo: minutos humanos por 100 casos aceptados
ActividadLínea de basepiloto
Resto de preparación manual600 minutos100 minutos
Revisión de resultados200 minutos250 minutos
Correcciones y excepciones100 minutos150 minutos
Supervisión específica del flujo de trabajo delegado0 minutos100 minutos
Total operativo900 minutos600 minutos

La diferencia operativa observada es 900 − 600 = 300 minutos o 5 horas: 9 versus 6 minutos humanos por caso aceptado. Mirar sólo la preparación habría acreditado al proyecto 500 minutos, ignorando el aumento en la revisión y las otras intervenciones.

Ahora supongamos que el equipo también dedica 180 minutos únicos a preparar y comprobar el piloto. El esfuerzo humano total para la prueba es 600 + 180 = 780 minutos. Por lo tanto, la diferencia con respecto a la línea de base en el período observado es de 120 minutos o 2 horas. Muestra esta preparación por separado sin hacerla desaparecer ni repetirla automáticamente en cada periodo futuro.

Costo por caso y trabajo inacabado

Calcule el coste por caso aceptado dividiendo los costes atribuidos al mismo alcance y período por el número de casos aceptados. Explica si incluye la configuración asignada a la prueba, la tarifa recurrente aplicable, los cargos variables contratados, el tiempo interno valorado para el cálculo de costes y los costes necesarios de terceros. No cuente dos veces un artículo ya incluido y muestre el total antes de dividirlo.

Los casos abiertos ya han consumido recursos: muéstrelos junto al costo unitario. Si los períodos no son comparables, la cifra sigue siendo provisional. el guía de costes de servicio explica los componentes de la cotización; Aquí la cuestión es qué costes acompañan a un resultado realmente aceptado. El tiempo disponible para otros trabajos y la reducción del gasto en efectivo siguen siendo resultados diferentes.

Terminar el juicio con decisión motivada

Elaborar una página que muestre el alcance, la línea de base, los resultados, los casos abiertos y las limitaciones de la comparación. Asignar una acción a cada cuestión: continuar dentro del mismo límite, corregir y repetir la evaluación, o suspender el paso afectado. la guía sobre controles operativos ayuda a establecer quién puede autorizar un reinicio o una expansión.

el descripción del servicio incluye pruebas y observación del trabajo completado; el formato, los datos accesibles y los criterios de cualquier acuerdo de necesidad piloto. Una muestra exitosa respalda esa decisión acotada. No establece un beneficio para cada departamento ni para cada mes.

Fuentes y lecturas adicionales

Digital Employee

Empieza con un proceso real.

Cuéntanos sobre una tarea recurrente en tu equipo. Podemos evaluar los datos, el alcance, los resultados y los controles que necesitaría.

Define tu primer encargo