Sobre este proyecto
it-programming / artificial-intelligence-1
Abierto
Se requiere un desarrollador experto para crear e implementar un avatar conversacional utilizando la plataforma HeyGen. El objetivo principal es que el avatar pueda interactuar en tiempo real mediante voz en streaming y responder preguntas basándose en una base de conocimiento proporcionada en formato PDF. Este es un proyecto de alta prioridad con un plazo de ejecución de 24 horas, por lo que se busca a una persona con experiencia comprobada en HeyGen y sus APIs.
El alcance del proyecto incluye:
1. Configuración y despliegue de un HeyGen Realtime / Streaming Avatar, utilizando la API de HeyGen con WebRTC para asegurar la comunicación en tiempo real.
2. Integración con un Large Language Model (LLM), preferiblemente OpenAI o cualquier otro LLM compatible, para gestionar la lógica conversacional del avatar.
3. Implementación de un sistema de Generación Aumentada por Recuperación (rag) que permita al avatar fundamentar sus respuestas en el contenido específico de un documento pdf que será provisto.
4. Desarrollo de una interfaz web mínima que cumpla con las siguientes funcionalidades:
- Visualización en vivo del avatar conversacional.
- Funcionalidad para iniciar la interacción por voz (pulsar para hablar) o detección automática de actividad de voz (VAD).
Es fundamental que el profesional tenga un conocimiento profundo de HeyGen y la capacidad de entregar este proyecto en el plazo estipulado de 24 horas.
Categoría Programación y Tecnología
Subcategoría Inteligencia Artificial
Tamaño del proyecto Grande
Plazo de Entrega: No definido
Habilidades necesarias