Configuración del sistema

Motor LLM-as-a-Judge

Clave de OpenRouter, modelo evaluador y temperatura. El determinismo del juez es lo que hace reproducible cada veredicto.

Leyendo configuración…

Se aplican rúbricas heurísticas locales. Alcanza para verificar el circuito, no para certificar un despliegue.

Obtener key en OpenRouter

Se guarda en la base local de Talos; no sale de esta máquina.

Máxima rigurosidad — recomendado para red-teaming

0.10Determinista

Entre 0.00 y 0.10 dos corridas idénticas producen el mismo veredicto. Por encima, la evaluación deja de ser reproducible.

Referencia de costos

Tarifas por millón de tokens

Talos calcula tokens y costo en USD por cada caso evaluado. Estas son las tarifas vigentes de OpenRouter para los jueces más usados.

Claude 3.5 Sonnet
in $3.00out $15.00
GPT-4o mini
in $0.15out $0.60
DeepSeek V4 Flash 0731
in $0.14out $0.28