Microsoft Research describió la tarea de evaluar Microsoft Copilot a gran escala en organizaciones de tamaño empresarial. Para este tipo de pruebas, se requieren datos de prueba que reflejen la complejidad de las empresas reales.
No es posible usar datos corporativos reales para este fin: contienen información sensible. En el título del estudio, los datos sintéticos se oponen a los datos reales como un camino hacia una evaluación más sustancial de la confianza en Copilot.
En la descripción disponible no hay información sobre la metodología específica de creación de conjuntos sintéticos, los resultados de las pruebas o una comparación con otros sistemas. La fuente se presenta como un único material de Microsoft Research, y su base probatoria está limitada a metadatos y a un breve resumen.”
comentario editorial
Por qué importa
Una consecuencia práctica probable es la búsqueda continua de formas de probar IA corporativa sin acceso a grandes conjuntos de datos sensibles. Las señales más próximas serán los detalles publicados sobre la metodología y los resultados de evaluaciones comparativas. Sigue existiendo una gran incertidumbre: el sinopsis proporcionado no muestra cuán bien los datos sintéticos reflejan el trabajo real de las organizaciones.