Interacción de IA Multimodal
Libera tus manos, servicio proactivo: construye terminales de interacción de IA que entienden el negocio y ven las necesidades.
Qué resuelve este módulo
La operación del sistema requiere habilidades especializadas, la interacción física limita la eficiencia, la respuesta a la demanda siempre va rezagada — cuando los métodos de interacción se quedan atrás, las capacidades de IA no pueden aterrizar.
Recomendado estudiar primero M1 Conectividad de Dispositivos y Control Inteligente
Escenarios típicos de aplicación
Capacidades Clave
- Entrenamiento sin código con SenseCraft AI
- Interacción multimodal con Watcher
- Despliegue local de LLM
- Desarrollo de herramientas MCP
Hardware del curso
Este curso emplea como material didáctico central los «terminales de IA visibles + potencia de cómputo local de inferencia».
reComputer RK3588-40
Caja de Computación en el Borde con IA · NPU de 6 TOPS
Caja de IA de código abierto con 8 núcleos + NPU de 6 TOPS, ampliable a 26 TOPS con un clic, para alojar localmente grandes modelos de lenguaje y servicios de inferencia multimodal: la base de cómputo donde aterrizan todas las capacidades de IA.
reTerminal D1001
HMI Táctil de 8 Pulgadas · Wi-Fi 6
Un terminal HMI inteligente de 8 pulgadas basado en ESP32-P4, con cámara y doble micrófono, compatible con Wi-Fi 6 / BLE 5 / Zigbee / Matter: la interfaz principal para escenarios de interacción como guías en salas de exposición y recepción.
SenseCAP Watcher ×2
Dispositivo XiaoZhi de Interacción por Voz y Visión con IA
Un terminal de IA que ve, escucha y habla; conectado a los modelos locales de gran tamaño actúa como «punto de servicio proactivo» del espacio — saluda a los visitantes cuando llegan y responde al instante a sus preguntas, demostrando el ciclo completo de interacción multimodal.
Los accesorios generales (pantalla, diseño de alimentación integrado, router, etc.) se configuran por separado.
Progresión en tres niveles: Demostración → Consultor → Diseño
Interacción de IA Sin Código
Nivel de Demostración · Experiencia de Punto Único
- Experiencia Sin Código de Interacción de IA y Entrenamiento Visual
- Conectar al Centro de Control Inteligente
- Implementar Interacción Multimodal Básica
Backend de IA Local
Capa de consultoría · Escenas vinculadas
- Desplegar Servicios de Backend de IA Localmente
- Configurar Parámetros del Modelo
- Conectar Librerías de Herramientas Existentes
Bucle de Negocio Privado
Nivel de Diseño · Integración de Negocio
- Desplegar LLM Localmente
- Desarrollar Herramientas Personalizadas
- Implementar Bucle de Negocio Completamente Privado