Control PCB

Propuesta de Trabajo Integrador: Gemelo Digital y Teleoperación Asistida en Realidad Mixta

Asignatura: Realidad Virtual Carrera: Ingeniería en Mecatrónica Alumno: Mario Papetti - 11807

1. Resumen del Proyecto

El presente proyecto propone el diseño y desarrollo de un Sistema de Realidad Mixta basado en el concepto de "Gemelo Digital". El sistema consta de una Interfaz Hombre-Máquina (IHM) inmersiva desarrollada en hardware, que permite a un usuario teleoperar una plataforma robótica móvil (tanque) en el mundo físico. Simultáneamente, el estado, posición y entorno del robot se replican y extienden en un entorno tridimensional virtual interactivo.

2. Cumplimiento de Objetivos de la Cátedra

El desarrollo aborda de manera integral los requisitos estipulados en la rúbrica del Trabajo Práctico Integrador:

• Desarrollo de Hardware IHM: Se diseña y adapta un mando de control físico específico (no ofimático), incorporando sensores inerciales de seguimiento (tracking) y actuadores hápticos.

• Desarrollo de Software: Se implementa un motor gráfico (Godot Engine) manejando primitivas gráficas 3D, iluminación y físicas de colisión.

• Interacción Bidireccional: El hardware IHM controla el entorno virtual y el robot físico; a su vez, los eventos del entorno virtual y físico generan respuestas en la IHM (vibración, indicadores visuales).

• Múltiples Escenarios: Se proponen dos escenarios lógicos de interacción diferenciados dentro del entorno virtual.

3. Arquitectura del Sistema

El proyecto se divide en tres nodos principales comunicados en tiempo real mediante protocolo UDP sobre una red Wi-Fi local:

A. Nodo IHM: Mando de Teleoperación (Hardware Custom)

Controlador: Microcontrolador ESP32-C3.

Dispositivos de Entrada: Joystick analógico (2 GDL) para tracción, pulsadores de acción y MPU6050 (Acelerómetro/Giroscopio) para seguimiento de gestos de inclinación.

Dispositivos de Salida (Feedback): Motor de vibración (realimentación háptica) e indicadores visuales de estado (conexión/batería).

Alimentación: Batería de litio gestionada por módulo TP4056 con protección integrada.

B. Nodo Actuador/Sensor: Plataforma Robótica Física

Controlador: Microcontrolador ESP32-S3.

Tracción: Chasis tipo tanque con control diferencial de motores de CC.

Percepción del Entorno: Array de 3 sensores ultrasónicos fijos (frontal, izquierdo, derecho) para detección de obstáculos.

Actuadores de Inmersión: Micro servo con emisor láser (simulación de herramienta/cañón), Buzzer pasivo (sonido espacial primario) y Display OLED I2C para telemetría local.

C. Nodo Virtual: Entorno 3D (Software)

Motor: Godot Engine 4.x (GDScript).

Lógica: Renderizado del modelo 3D del robot, cálculo de físicas, interpretación de telemetría UDP y gestión de la interfaz gráfica de usuario (GUI).

4. Escenarios de Interacción (Mundo Virtual)

El software presentará dos niveles o escenarios de uso que modifican la forma en la que el usuario interactúa con la realidad mixta:

Escenario 1: Navegación Asistida (Radar Táctil-Visual)

El usuario maneja el tanque físico observando únicamente el entorno 3D en la pantalla (Teleoperación). Las lecturas de los 3 sensores ultrasónicos físicos se renderizan como campos de fuerza o escudos alrededor del modelo 3D. Si el robot físico se acerca peligrosamente a un obstáculo real, el motor gráfico detecta la proximidad, cambia el color del escudo virtual a rojo, emite una alarma sonora (en el robot) y envía un comando al mando IHM para generar una advertencia háptica (vibración).

Escenario 2: Pista de Pruebas e Interacción con Objetos Virtuales

Se añade un plano con colisiones y "dianas" u objetivos virtuales en el entorno 3D. Al presionar el gatillo en el mando físico, el tanque real acciona el servo con el láser (acción física), mientras que en el motor virtual se proyecta un Raycast (acción virtual). Si el rayo virtual impacta una diana, el motor gráfico actualiza el puntaje, hace parpadear los LEDs/Display físicos del tanque y genera un pulso háptico de confirmación en el mando del usuario.

5. Cronograma y Entregables

• Fase 1: Ensamblaje, ruteo de PCBs y programación de bajo nivel de los nodos ESP32 (IHM y Tanque).

• Fase 2: Programación de la capa de red (UDP) y diseño de l entorno 3D (primitivas y físicas) en Godot.

• Fase 3: Integración de sistemas, diseño de los 2 escenarios lógicos y depuración de latencias.

• Fase 4: Elaboración de la documentación técnica ("manual paso a paso") y grabación del video demostrativo de 5-7 minutos.