La alianza lleva el ciclo virtuoso de datos de Sereact - entran episodios reales, salen políticas validadas - al Physical AI Workbench de Nebius. El primer flujo de trabajo conjunto es un pipeline sim-to-real de bucle cerrado que agentes de IA construyen y ejecutan con NVIDIA Isaac, NVIDIA Cosmos y NVIDIA Cosmos Data Factory, desplegado en primer lugar para robots de Sereact que reponen estanterías en tiendas.
Sereact, la empresa de IA encarnada que está detrás del cerebro robótico Cortex, y Nebius, la empresa de infraestructura de IA, han anunciado hoy una alianza para acortar el ciclo de mejora de los robots que trabajan en instalaciones empresariales. Sereact ejecutará su bucle de aprendizaje - recoger, simular, entrenar, evaluar, desplegar - en el Physical AI Workbench de Nebius, de modo que lo que un robot aprende en las instalaciones de un cliente llegue a las siguientes en días y no en semanas. El primer pipeline conjunto ya está en marcha: un flujo de trabajo sim-to-real de bucle cerrado que agentes de IA ensamblan y operan, utilizado en primer lugar para robots de Sereact que reponen estanterías en tiendas.
Una flota de robots solo mejora tan rápido como su bucle más lento. El modelo Cortex de Sereact aprende de picks reales, pero convertir un fallo en las instalaciones de un cliente en una política mejor en el robot seguía teniendo que pasar por el mundo físico. Esto implicaba recoger episodios in situ, reentrenar, probar en el robot y repetir. Cada ciclo llevaba semanas y solo cubría los escenarios que un equipo podía preparar a mano. Cuando un robot de reposición maneja miles de SKU con mobiliario, embalajes e iluminación que cambian de una tienda a otra, cada tienda nueva supone un conjunto nuevo de condiciones nunca vistas, y la superficie de venta no es un laboratorio de pruebas. La simulación podía cubrir esas condiciones, pero poner en marcha NVIDIA Isaac Sim, NVIDIA Cosmos, clústeres de entrenamiento y entornos de evaluación en GPU en la nube, y después conectarlo todo entre sí, era un proyecto de infraestructura de gran envergadura, no un proyecto de robótica.
En el Physical AI Workbench de Nebius, el bucle es un único flujo de trabajo sobre una única capa de datos compartida. Los episodios reales - vídeo más cinemática - llegan a un único bucket de almacenamiento de objetos de Nebius. A partir de ahí, el pipeline ejecuta siete pasos: ingesta; simulación y aumento de datos (Isaac Lab genera 10.000 variantes de entorno y Cosmos las vuelve a renderizar con distintas condiciones de iluminación, mobiliario y embalaje); versionado del conjunto de datos con una división 80/20; entrenamiento de la política en 8.000 entornos; evaluación en 2.000 entornos reservados con una rúbrica puntuada por un VLM; comprobación de la puntuación frente a un umbral; y, si se supera, despliegue en el robot de la tienda para una prueba en el mundo real. Si no se supera, el pipeline genera un aumento de datos dirigido a los escenarios fallidos, reentrena y vuelve a evaluar. El resultado es un robot de reposición que llega a una tienda nueva ya validado frente a miles de variantes de las condiciones de esa tienda.
La novedad está en quién construye y ejecuta el pipeline. En lugar de que los ingenieros conecten a mano cinco herramientas, un agente de IA ensambla el flujo de trabajo a partir de skills. Las blueprint skills de NVIDIA Cosmos Data Factory son archivos de instrucciones abiertos y versionados que un agente de programación lee directamente; cada una se encarga de la selección del flujo, la verificación previa de credenciales y del pool de GPU, las comprobaciones de la caché de modelos, el envío, la monitorización y la recuperación de resultados. Nebius añade skills de Workbench para simulación a gran escala, entrenamiento, evaluación y la puerta de validación. A continuación, el agente orquesta la ejecución: antes de que empiece nada, muestra una previsión del tiempo de ejecución y del coste de GPU, lanza cada etapa, comprueba la puerta de validación y, cuando una ejecución falla, decide qué escenarios reforzar mediante aumento de datos, vuelve a ejecutar e informa de la diferencia. Los ingenieros describen el resultado que buscan - "validar la política de reposición para las nuevas estanterías" - y aprueban las decisiones que superan un umbral de coste. El agente hace el resto.
"Una flota de robots es un sistema de aprendizaje, y hoy la mayor parte de ese sistema funciona a base de ingenieros agotados", afirmó Evan Helda, responsable de IA física de Nebius. "Sereact ya tiene la parte más difícil: mil millones de picks reales y clientes que confían en sus robots. Lo que nosotros aportamos es el bucle: entran episodios reales, sale una política validada y un agente ejecuta los pasos intermedios. Empezar por la reposición en tiendas es una decisión deliberada. Miles de SKU, cientos de tiendas y no hay dos pasillos iguales."
"Cortex ha mejorado aprendiendo de picks reales, y eso no va a cambiar. Lo que aporta esta alianza es cobertura y velocidad: la tienda que aún no hemos abierto, el mobiliario que llega el próximo trimestre, la iluminación a la hora del cierre, todo ello probado frente a diez mil variaciones", afirmó Ralf Gulde, CEO de Sereact.
El pipeline sim-to-real de bucle cerrado ya está disponible como arquitectura de referencia de Workbench, con las blueprint skills de NVIDIA Cosmos Data Factory preinstaladas, para cualquier equipo de robótica en Nebius. Se ejecuta en las regiones de Nebius en la UE; los clientes pagan por la computación y el almacenamiento que utilizan, sin una tarifa aparte por Workbench. Los equipos de robótica pueden solicitar una plaza como socio de diseño a través de un equipo de cuentas de Nebius.
Sereact desarrolla IA física para almacenes y fabricación. Su cerebro Cortex opera en celdas de picking de un brazo, estaciones de devoluciones de doble brazo, robots humanoides y Sereact Lens, un sistema de percepción 3D para inventario y control de calidad. Fundada en 2021, con sede en Stuttgart. Entre sus clientes se encuentran IKEA, Arvato, alza.cz, Flaschenpost, Sonepar, Monta (parte de DHL), Daimler Truck, Mercedes-Benz, BMW, MS Direct, Paxon (parte de Bnode), DeltiLog, Rohlik Group y Correos de Austria. Con la participación de Zalando, Sereact ha captado hasta la fecha más de 145 millones de dólares.
NVIDIA (NASDAQ: NVDA) es la pionera de la computación acelerada y una fuerza impulsora de la era moderna de la IA, y proporciona las plataformas que se utilizan en sectores que van desde la computación en la nube hasta la robótica. A través de su plataforma Isaac, NVIDIA da soporte a los desarrolladores de robótica con herramientas de simulación, entrenamiento y despliegue, entre ellas NVIDIA Isaac Sim, que permite a empresas como Sereact desarrollar y validar robots en entornos virtuales físicamente precisos antes de desplegarlos en operaciones reales.
Nebius, la empresa de nube de IA, está construyendo la plataforma integral para que desarrolladores y empresas tomen el control de su futuro en IA, desde los datos y el entrenamiento de modelos hasta el despliegue en producción. Basada en una profunda experiencia tecnológica propia y operando a escala con una presencia global en rápida expansión, Nebius da servicio a startups y empresas que desarrollan productos, agentes y servicios de IA en todo el mundo. Nebius cotiza en el Nasdaq (NASDAQ: NBIS) y tiene su sede en Ámsterdam.
Acceda al contenido y los recursos de esta publicación
Copie el texto completo del artículo al portapapeles para leerlo o compartirlo fácilmente.
Descargue en un archivo ZIP todas las imágenes de alta resolución utilizadas en este artículo.