Análisis en profundidad de las métricas de rendimiento para la creación de perfiles de entrenamiento de modelos de ML

Mejora el algoritmo para maximizar la utilización de los recursos de entrenamiento del ML/AI (aprendizaje automático e inteligencia artificial) y el resultado de los experimentos

Seguimiento y creación de perfiles de capacitación del modelo ML/AI, métricas de rendimiento internas/externas

Recomendaciones minuciosas de optimización ML/AI

Runsets para identificar los resultados más eficientes del entrenamiento de modelos ML/AI con un conjunto de hiperparámetros y un presupuesto definidos

Integración con Spark

Seguimiento y creación de perfiles de capacitación del modelo ML/AI, recopilación de métricas de rendimiento internas y externas

OptScale perfila modelos de aprendizaje automático y analiza métricas internas y externas en profundidad para identificar problemas de capacitación y cuellos de botella.

El entrenamiento del modelo ML/AI es un proceso complejo que depende de un conjunto definido de hiperparámetros, hardware o uso de recursos de la nube. OptScale mejora el proceso de creación de perfiles de ML/IA al obtener un rendimiento óptimo y ayuda a alcanzar el mejor resultado de los experimentos de ML/IA.

Recomendaciones minuciosas de optimización ML/AI

OptScale brinda total transparencia en todo el proceso de capacitación y equipos del modelo ML/AI y captura las métricas ML/AI y el seguimiento de KPI, que ayudan a identificar problemas complejos en los trabajos de capacitación ML/AI.

Para mejorar el rendimiento, los usuarios de OptScale obtienen recomendaciones tangibles como el uso de instancias reservadas/al contado y planes de ahorro, redimensionamiento y migración de familias de instancias, detección de CPU/IO, inconsistencias de IOPS que pueden ser causadas por transformaciones de datos, uso práctico del tráfico entre regiones, evitar Estado inactivo de los ejecutores de Spark, comparación de ejecución basada en la duración del segmento.

Runsets para identificar los resultados más eficientes del entrenamiento de modelos ML/AI con un conjunto de hiperparámetros y un presupuesto definidos

OptScale permite a los ingenieros de ML/IA ejecutar muchos trabajos de capacitación en función de un presupuesto predefinido, diferentes hiperparámetros y hardware (aprovechando las instancias reservadas/puntuales) para revelar el resultado mejor y más eficiente para la capacitación de su modelo de ML/IA.

Integración con Spark

OptScale es compatible con Spark para hacer que el proceso de creación de perfiles de tareas de Spark ML/AI sea más eficiente y transparente. Un conjunto de recomendaciones de OptScale, entregado a los usuarios después de crear perfiles de modelos ML/AI, incluye evitar el estado inactivo de los ejecutores de Spark.