---
title: Crea entornos de RL con REA
url: https://rea.tools/es/guides/rl-environments/
---

[Inicio](https://rea.tools/es/) / [Guías](https://rea.tools/es/guides/) / Entornos de RL

# Crea entornos de RL.

Convierte una sesión grabada de una aplicación web en un entorno ejecutable para entrenar y probar agentes de IA.

[Ver el vídeo del anuncio en X](https://x.com/reatools/status/2112574822584918075?s=20)

## Qué crea REA

Un agente puede practicar cómo encontrar una incidencia, crear una carpeta o editar un registro sin ejecutar la aplicación original. REA crea las herramientas que el agente invoca, los datos locales que usan esas herramientas y una prueba básica que comprueba que el entorno arranca y responde.

1. 01 · Grabar

   Usa una aplicación de prueba

   Captura las solicitudes, las respuestas y los resultados de los cambios.
2. 02 · Crear con REA

   Crea las herramientas y el estado local

   Exporta una carpeta de AgentEnv ejecutable con la grabación y una prueba.
3. 03 · Ejecutar con AgentEnv

   Entrega el entorno a un agente

   Añade objetivos de tarea y comprobaciones de recompensa para la evaluación o el entrenamiento de RL.

La grabación determina qué operaciones puede admitir el entorno. Los cambios se admiten cuando la grabación confirma sus efectos.

## Antes de empezar

[Configura REA con tu agente de programación](https://rea.tools/es/get-started/). Para grabar una aplicación, necesitas un navegador de la familia Chrome y una instancia de prueba en ejecución en la que el agente pueda crear, editar y eliminar datos. REA graba la aplicación que tú le indiques; tú la inicias y preparas sus datos de prueba.

Para ejecutar el entorno exportado, instala el [framework AgentEnv](https://github.com/scaleapi/agentenv-framework#install) e inicia Docker. La comprobación de compatibilidad de REA usa la versión `0.9.1334` de AgentEnv con Python 3.12.

## Graba y crea con tu agente

Indica a tu agente qué aplicación y qué operaciones debe cubrir. Para una aplicación con carpetas, adapta este ejemplo:

Tu agente de programación

Usa REA para crear un entorno de AgentEnv a partir de mi aplicación web de prueba en `http://127.0.0.1:3000`. Cubre el listado, la creación, el cambio de nombre y la eliminación de carpetas. Puedes crear y eliminar carpetas de prueba; deja sin cambios los datos existentes. Inicia sesión como admin con la contraseña de `APP_PASSWORD`. Usa el navegador en `/absolute/path/to/chromium` y exporta a `/absolute/path/to/my-env`, que todavía no existe. Comprueba qué operaciones se admiten e informa de cualquier carencia.

Prompt de ejemplo. Sustituye la URL, las operaciones, la cuenta y las rutas. Define `APP_PASSWORD` en el entorno que inicia el servidor MCP de REA para que la contraseña no aparezca en el prompt.

Tu agente inspecciona la aplicación, graba una sesión, comprueba las operaciones admitidas y exporta el entorno. Tras la exportación, continúa con [la ejecución del entorno](https://rea.tools/es/guides/rl-environments/#run).

## O usa una grabación guardada

Un archivo HAR registra las solicitudes y respuestas de red de un navegador. Exporta uno que incluya los cuerpos de las respuestas de la API desde el panel de red del navegador y, después, crea el entorno en una carpeta nueva o vacía:

Crear el entorno

```
npx -y rea-agents@latest environment-build ./session.har ./my-env --name my-env --json
```

También puedes pasar el JSON de Evidence de captura guardado por `capture-browser-scenario` de REA o por la inspección de HAR. Evidence es la grabación guardada junto con la información de su origen. La creación lee datos locales y escribe la carpeta sin contactar con la aplicación. Añade `--dry-run` para revisar el informe sin escribir archivos.

El informe enumera las operaciones de lectura, los cambios admitidos y las operaciones excluidas porque la grabación no estableció sus efectos. Cada operación excluida indica un motivo y una pista sobre qué grabar a continuación.

## Ejecuta el entorno

Tanto si tu agente exportó la carpeta como si la creaste tú a partir de una grabación, ejecútala con AgentEnv:

Ejecutar la prueba del entorno

```
agent-env run ./my-env
```

Usa la ruta que indicó tu agente si es distinta. La primera ejecución construye la imagen del contenedor y necesita acceso a los orígenes de su imagen y de sus paquetes.

La tarea smoke incluida es una prueba básica. Comprueba el número de herramientas y, cuando existe una herramienta de lectura adecuada, la invoca y comprueba el estado de su respuesta. Superarla demuestra que el entorno arranca y responde en esa configuración.

## Añade tareas y comprobaciones de recompensa

Usa el entorno con tu framework de RL para definir objetivos, puntuar resultados y ejecutar el entrenamiento. Tu agente de programación puede ayudarte a escribir las tareas y las comprobaciones. Empieza por una operación que el entorno admita:

Tu agente de programación

Usa este entorno exportado para añadir una tarea de AgentEnv que pida a un agente crear una carpeta llamada Practice. Comprueba el estado del entorno para confirmar que la carpeta existe con ese nombre y usa esa comprobación para puntuar el resultado. Restablece el entorno antes de cada ejecución. Usa los formatos de tarea y de verificador de AgentEnv.

Prompt de ejemplo para un entorno que admite la creación de carpetas. Una tarea que cambia datos debe comprobar el estado resultante; una tarea de consulta puede contrastar una respuesta con un valor grabado.

La exportación incluye el entorno ejecutable y su prueba básica. La calificación específica de cada tarea se añade en el flujo de evaluación. Consulta la [documentación de AgentEnv](https://www.agentenvframework.com/docs) para conocer las tareas, los verificadores y las conexiones de agentes.

## Comprueba qué funciona

Para que los cambios se admitan, graba los resultados además de la acción: lee un elemento, cámbialo y vuelve a leer el elemento y su lista antes del siguiente cambio. Repite con valores distintos. Para las eliminaciones, graba la respuesta de elemento inexistente y la lista actualizada.

Superar la prueba de arranque, que un agente complete una tarea y coincidir con la aplicación original son comprobaciones distintas. Para la última, usa `environment-compare` con una grabación aparte de las llamadas hechas a la aplicación desde los mismos datos iniciales.

Antes de compartir la carpeta, revisa los cuerpos de respuesta y las rutas locales que conserva. Pueden quedar cabeceras personalizadas, valores de consulta y tokens en los cuerpos. Los avisos de nombres de credenciales señalan lugares que revisar; no eliminan esos valores.

Sigue la [guía completa de grabación y validación](https://github.com/morluto/rea/blob/main/docs/agent-environments-quickstart.md) para conocer los informes de cobertura y los comandos de comparación. La [referencia de entornos](https://github.com/morluto/rea/blob/main/docs/agent-environments.md) cubre el servicio directo por MCP, los controles de estado y los límites.

## Crear un entorno de una aplicación de escritorio

Para una aplicación de escritorio de Linux, describe la tarea que quieres que practique el agente. Por ejemplo, pídele que cree un entorno de Gnote en el que añada aceite de oliva a una lista de la compra. El agente instala la aplicación en un equipo de compilación local, define la tarea, exporta el entorno y lo comprueba en un equipo nuevo mediante capturas de pantalla, el ratón y el teclado.

El equipo de compilación necesita Linux en amd64 o arm64, Docker y la versión especificada de AgentEnv. Sigue la [guía de configuración del equipo de compilación](https://github.com/morluto/rea/blob/main/docs/desktop-build-computer.md#set-up-a-build-host) para instalar los requisitos y comprobar que el equipo está listo.
