Activo hasta el 20/10/2026

Desafío de Implementación de Agentes de IA

Dos frameworks, la misma base de conocimiento, los mismos modelos, 13 casos por participante (11 comunes + 2 del adversario). El agente más eficiente, preciso y consistente gana.

Objeto del desafío

Determinar cuál de las dos implementaciones es capaz de construir y ejecutar el agente más eficiente, preciso, consistente y adecuado para resolver consultas basadas en una misma Base de Conocimiento.

Participantes

  • Néstor Raúl Sáenz Chajín — Implementación basada en LangGraph
  • Leonardo David Scelza — Implementación basada en synapseForge

Base de Conocimiento

Flores del Valle S.A.S. — Información sobre sucursales, horarios, reservas, cancelaciones, pagos, entregas, eventos (cumpleaños, matrimonios, funerales), descuentos por volumen, preguntas frecuentes y restricciones comerciales.

Modelos obligatorios

  • LLM: Gemini 3.5 Flash Lite
  • Embeddings: Gemini Embedding 2

Restricciones clave

  • Sin paralelización — todo secuencial
  • Sin fuentes externas de información
  • Mismo modelo para ambos participantes
  • Tracking completo en SQLite (.db)
  • Evaluación ciega (Agente A / Agente B)

Casos de prueba

CASO 1

Dificultad baja

Recuperación básica de información, comprensión de horarios, identificación de excepciones.

"¿Cuál es el horario de atención de la Sede Norte de Flores del Valle y qué atención ofrece los domingos?"
CASO 2

Dificultad media

Interpretación de cantidades, aplicación de reglas de descuento, cálculo y combinación de información de distintas secciones.

"Quiero organizar un cumpleaños para 60 personas. ¿Qué opciones de cumpleaños tienen para esa cantidad de invitados, cuánto costaría el servicio y qué descuento corresponde aplicar?"
CASO 3

Dificultad alta

Comprensión de múltiples reglas, detección de incompatibilidades, aplicación de restricciones, cálculos, descuentos, anticipos y modalidades de pago.

"Quiero organizar un matrimonio para 250 invitados dentro de 20 días. Me interesa el paquete Elegance, necesito agregar 5 centros de mesa adicionales y quiero saber cuánto tendría que pagar, qué descuento me corresponde, cuánto debo entregar como anticipo, si puedo pagar en cuotas y si puedo solicitar una entrega urgente. Indicame también qué condiciones y restricciones debería tener en cuenta."
CASOS 4 A 11

Consultas del jurado (comunes)

8 consultas adicionales del jurado humano (2 por cada uno de los 4 integrantes). Las resuelven ambos participantes. Cada consulta indica qué se busca evaluar. Secretas, se develan en el momento.

"A definir por cada integrante del jurado al momento de la evaluación."
CASOS 12 A 15

Consultas cruzadas (2 por participante)

4 consultas distintas en total. Cada participante propone 2 para su adversario. Cada uno resuelve las 2 de su adversario, totalizando 13 por participante (11 comunes + 2 cruzados). Cada consulta indica qué se busca evaluar. Secretas, se develan en el momento.

"A definir por cada participante al momento de la evaluación."
Base de conocimiento

Flores del Valle S.A.S.

Descargar .md

Flores del Valle — Base de Conocimiento


1. Informacion general de la empresa

Flores del Valle S.A.S. (NIT 900.123.456-7) es una empresa de eventos y florería con más de 15 años de experiencia en el mercado. Ofrecemos decoración floral y organización integral para cumpleaños, matrimonios, arreglos funerarios y fiestas de todo tipo.

  • Nombre comercial: Flores del Valle
  • Eslogan: "Flores para cada momento de tu vida"
  • Teléfono principal: +57 300 555 0100
  • WhatsApp de pedidos: +57 300 555 0101
  • Correo: contacto@floresdelvalle.ejemplo
  • Línea de emergencia funeraria (24/7): +57 300 555 0199

2. Ubicaciones y horarios

Sede Principal (Centro)

  • Dirección: Calle 45 # 12-30, Centro
  • Horario: Lunes a viernes 8:00 a.m. – 6:00 p.m. · Sabados 9:00 a.m. – 2:00 p.m. · Domingos cerrado

Sede Norte

  • Dirección: Avenida 7 # 98-15, Barrio Norte
  • Horario: Lunes a sábado 9:00 a.m. – 7:00 p.m. · Domingos 10:00 a.m. – 1:00 p.m. (solo atención funeraria de emergencia)

El servicio de arreglos funerarios está disponible los 7 días de la semana, incluyendo domingos y festivos, a través de la línea de emergencia, dado que las necesidades funerarias no dan espera.

3. Políticas de reservación

Tipo de servicioAnticipacion minimaAnticipo requerido
Cumpleaños5 dias40% del valor total
Fiestas varias5 dias40% del valor total
Matrimonios30 dias50% del valor total
Arreglos funerariosSin anticipación mínima (atención en 3–6 horas)Pago de contado al confirmar el pedido
  • El saldo restante de cumpleaños y fiestas varias debe cancelarse máximo 2 días antes del evento.
  • El saldo restante de matrimonios debe cancelarse máximo 7 días antes del evento.
  • Toda reserva debe confirmarse por escrito (WhatsApp o correo) con el número de invitados estimado.

4. Políticas de cancelación y reembolsos

Cumpleaños y fiestas varias:

  • Cancelación con más de 7 días de anticipación → devolución del 100% del anticipo.
  • Cancelacion entre 3 y 7 dias antes del evento → devolucion del 50% del anticipo.
  • Cancelación con menos de 72 horas de anticipación → sin devolución del anticipo.

Matrimonios:

  • Cancelación con más de 15 días de anticipación → devolución del 100% del anticipo.
  • Cancelación con menos de 15 días de anticipación → sin devolución del anticipo.

Reprogramacion:

  • Se permite reprogramar una sola vez sin costo adicional, solicitándolo con al menos 5 días de anticipación (10 días para matrimonios). Una segunda reprogramación tiene un cargo administrativo del 10% del valor del pedido.

Arreglos funerarios:

  • No tienen política de cancelación una vez confirmado el pedido, dado el carácter inmediato del servicio.

5. Métodos de pago

  • Transferencia bancaria: Cuenta de Ahorros Banco Ejemplo N. 000-123456-78, a nombre de Flores del Valle S.A.S., NIT 900.123.456-7.
  • Pago en linea: enlace de pago https://pagos.floresdelvalle.ejemplo/pagar.
  • Pago presencial: efectivo o datáfono (tarjeta débito/crédito) en cualquiera de nuestras sedes.
  • No se aceptan cheques.
  • Todo pago debe confirmarse enviando el comprobante por WhatsApp o al correo pagos@floresdelvalle.ejemplo.
  • Matrimonios: se permite dividir el pago en hasta 3 cuotas, previa aprobacion.

6. Zonas y costos de entrega

ZonaDistanciaCosto de entrega
Zona 1Centro y alrededores (hasta 5 km)Gratis
Zona 25 a 15 km$25.000
Zona 3Más de 15 km$45.000 (sujeto a disponibilidad)
  • Entregas urgentes (menos de 4 horas de anticipación): recargo del 20% sobre el valor del pedido, sujeto a disponibilidad.
  • El servicio funerario tiene entrega gratuita en cualquier zona dentro del área metropolitana, sin excepción.
  • No se realizan entregas fuera del área metropolitana.

7. Servicio de Cumpleaños — menú y precios

Tortas

PaqueteTamanoPorcionesSabores disponiblesPrecio
Torta ClasicaPequena15Vainilla, Chocolate$80.000
Torta ClasicaMediana30Vainilla, Chocolate, Red Velvet$140.000
Torta ClasicaGrande50Vainilla, Chocolate, Red Velvet, Tres Leches$220.000
Torta TematicaMediana30Diseno personalizado$180.000
Torta TematicaGrande50Diseno personalizado$260.000

Gaseosas (por paquete)

PaqueteContenidoPrecio
Gaseosa Chico12 botellas de 400ml (surtidas)$36.000
Gaseosa Mediano24 botellas de 400ml (surtidas)$68.000
Gaseosa Grande48 botellas de 400ml (surtidas)$130.000

Combos de cumpleaños (torta + gaseosa + decoración floral)

ComboIncluyePersonas estimadasPrecio
Fiesta ChicaTorta Clasica Pequena + Gaseosa Chico + arreglo floral de mesaHasta 20$145.000
Fiesta MedianaTorta Clasica Mediana + Gaseosa Mediano + 2 arreglos floralesHasta 40$260.000
Fiesta GrandeTorta Tematica Grande + Gaseosa Grande + 4 arreglos florales + globosMas de 50$420.000

Extras opcionales

ExtraPrecio
Piñata$45.000
Mesa de dulces (para 30 personas)$180.000
Animacion (2 horas)$250.000
Fotografia del evento (3 horas)$300.000

8. Servicio de Matrimonios — paquetes

PaqueteIncluyePrecio
EsencialRamo de novia + 10 centros de mesa + decoración de altar sencilla$1.200.000
EleganceRamo de novia + boutonniere + 20 centros de mesa + arco floral + decoración de entrada$2.500.000
PremiumTodo lo de Elegance + decoración completa de recepción + pétalos para camino nupcial + flores para el vehículo$4.200.000
  • Todos los paquetes incluyen asesoría de diseño floral sin costo adicional.
  • Centros de mesa adicionales (fuera del paquete): $35.000 c/u.
  • Flores para el cabello de damas de honor: $25.000 c/u.

9. Servicio de Arreglos Funerarios

ProductoTamanoPrecio
Corona fúnebreChica$150.000
Corona fúnebreMediana$220.000
Corona fúnebreGrande$320.000
Ofrenda floral de mesaUnicaDesde $90.000
Ramo de condolenciaÚnicoDesde $70.000
Cruz floralUnicaDesde $180.000
  • El servicio incluye tarjeta de dedicatoria sin costo adicional.
  • No aplican descuentos por volumen en este servicio, dado que los pedidos suelen ser individuales.
  • Atencion telefonica y coordinacion de entrega en menos de 6 horas desde la solicitud.

10. Servicio de Fiestas Varias

Tipo de eventoPaquete base incluyePrecio desde
Baby showerDecoración temática + centro de mesa + globos$180.000
GradosArreglo floral + banner personalizado + globos$150.000
AniversariosArreglo floral premium + velas decorativas$130.000
Despedida de soltero/aDecoración temática + globos + accesorios$160.000
Primera comuniónArreglo floral + centro de mesa + recordatorios$170.000

Los eventos de esta categoría no cuentan con descuento por volumen de invitados, independientemente del número de asistentes.

11. Resumen de descuentos por volumen

ServicioCondicion para el descuentoDescuento
CumpleañosMas de 50 personas confirmadas (51 en adelante)10%
MatrimoniosMas de 200 invitados confirmados (201 en adelante)20%
Arreglos funerariosNo aplica0%
Fiestas variasNo aplica0%

Reglas de aplicacion:

  • El número de invitados debe estar confirmado por escrito por el cliente al momento de generar la cotización final.
  • El descuento aplica sobre el valor del pedido (torta, decoración, paquete floral), no sobre los costos de entrega.
  • El descuento no es acumulable con otras promociones vigentes.
  • Si el número de invitados cambia después de aplicado el descuento, Flores del Valle se reserva el derecho de ajustar el valor final.

12. Preguntas frecuentes

¿Puedo combinar servicios en un mismo pedido?
Sí, por ejemplo un combo de cumpleaños con extras de decoración floral adicional. Los servicios funerarios no se combinan con otros tipos de evento.

¿Hacen envíos fuera de la ciudad?
No, solo dentro del área metropolitana (ver sección 6).

¿Puedo pagar en cuotas?
Solo los paquetes de matrimonio permiten hasta 3 cuotas. Los demás servicios no manejan financiación.

¿Los precios incluyen impuestos?
Sí, todos los precios publicados en este documento incluyen IVA.

¿Puedo pedir una torta sin gaseosa, por separado?
Sí, las tortas y las gaseosas también se venden por separado, fuera de los combos.

¿Qué pasa si necesito el servicio funerario un domingo o festivo?
Se atiende con normalidad a través de la línea de emergencia funeraria (24/7).

Evaluación

Criterios de evaluación

Siete dimensiones con pesos definidos. La puntuación final es la sumatoria de (Estado × Peso).

25%

Calidad de respuesta

100% de los puntos solicitados, cero alucinaciones, cita la fuente en la Base de Conocimiento.

18%

Razonamiento y reglas

Detecta todas las incompatibilidades y los cálculos son 100% correctos.

15%

Eficiencia de orquestación

Caso 1: ≤2 llamadas. Caso 2: ≤3 llamadas. Caso 3: ≤4 llamadas.

15%

Eficiencia de recursos

Caso 1: ≤1.000 tokens. Caso 2: ≤2.500 tokens. Caso 3: ≤4.000 tokens.

12%

Latencia LLM

Caso 1: ≤1,8s. Caso 2: ≤3,6s. Caso 3: ≤6,0s. (Coeficiente 1.2x)

10%

Consistencia

5 de 5 ejecuciones idénticas en respuesta y reglas aplicadas.

5%

Cumplimiento de restricciones

Cero violaciones, archivo .db completo y modelos correctos.

Bases

Jurado y transparencia

Evaluación mixta con jurado humano e independiente + LLM-as-Judge.

Jurado humano

4 integrantes: 2 designados por cada participante. Evaluación directa de las implementaciones.

Jurado artificial

1 LLM independiente como juez. Utiliza una rubrica previamente definida con las mismas condiciones de evaluación para ambas implementaciones.

Evaluación ciega

Las implementaciones se presentan como "Agente A" y "Agente B" sin revelar cual corresponde a cada framework hasta finalizar la evaluación.

¿Listo para competir?

Descargá el pliego completo con todas las bases, restricciones y criterios de evaluación.