news.inema.pro

news.inema.pro / Todas las noticias

proyecto Publicada el

robotica-real2sim: 50 episodios se convierten en un conjunto de datos de LeRobot en 69 s

robotica-real2sim convierte 50 episodios en un conjunto de datos de LeRobot en 69 segundos.

robotica-real2sim es un proyecto abierto que reproduce en una computadora un flujo de robótica con inteligencia artificial. A partir de una foto de una mesa, crea una escena de simulación física en MuJoCo con un brazo Franka Panda. Una hoja A4 en la foto ayuda a estimar el tamaño y la posición de los objetos. El proyecto no usa Gemini 4 Argon: reproduce la idea con herramientas abiertas.

La simulación puede generar datos de entrenamiento sin que una persona guíe el brazo robótico en cada intento. En el resultado registrado por el proyecto, se completaron 50 episodios con variaciones en 8,7 segundos. Cada episodio incluye anotaciones sobre etapas y eventos, además de una indicación de calidad. Antes de enviar un plan a un robot real, el sistema lo prueba 20 veces en la simulación; los planes con menos del 90% de aciertos se rechazan. Esto permite experimentar sin tener un robot, pero los resultados dependen de que la simulación represente bien el mundo físico.

Para empezar, la guía requiere Python 3.10 o posterior, Git y MuJoCo; Codex es opcional para interpretar la foto y escribir el plan. La foto debe tomarse desde arriba e incluir una hoja A4 como referencia de escala. El proyecto también permite crear la escena manualmente. Conviene comprobar que el gemelo digital de la mesa coincida con la foto: el propio proyecto informa errores de contacto, agarre y fuerza que podrían producir resultados engañosos. La simulación ayuda a evaluar un plan, pero hay que comprobarla.

Leer en la fuente →

El enlace abre el contenido original; algunos requieren suscripción.

Ir más allá en INEMA.CLUB

Más noticias

  1. 15/10
    VoiceStudio: clonación de voz, doblaje y transcripción en tu propio equipoVoiceStudio ofrece clonación de voz, doblaje y transcripción local como alternativa a ElevenLabs.
  2. 15/10
    hypit: agente recrea un video viral con voz, subtítulos, escenas y efectoshypit recrea un video viral con voz, subtítulos, escenas de apoyo y efectos.
  3. 15/10
    hindsight: memoria local para que tu agente aprenda con el uso de Claudehindsight da memoria al agente para que aprenda con el uso, de forma local y con la suscripción de Claude.
  4. 15/10
    concat: editor de vídeo libre con subtítulos, voz y fondos con IAconcat edita videos con funciones de IA y sin marca de agua.
  5. 14/10
    muse-wonder: conoce la IA de Meta y descubre cómo probarlaEl proyecto presenta la IA de Meta y explica cómo usarla y probar sus gráficos.