Lanzamiento del modelo y rendimiento
Anthropic ha presentado Claude Haiku 5.5, que la empresa describe como el modelo pequeño más barato, rápido y capaz que ha lanzado jamás. El modelo está diseñado para tareas de alto volumen y sensibles al costo, como resúmenes, compacciones, consultas a bases de datos y solicitudes de clasificación.
Según Anthropic, Claude Haiku 5.5 es el modelo más rápido de la empresa hasta la fecha a la velocidad estándar de cada modelo, aunque se ejecuta más lentamente que los modelos Opus en Modo Rápido.
La empresa proporcionó resultados de pruebas comparativas entre Haiku 5.5, Haiku 4.5, GPT-6 Luna y Sonnet 5.5:
- GDPval-AA v2.1: Haiku 5.5 obtuvo 1620 puntos, en comparación con 735 para Haiku 4.5, 1437 para GPT-6 Luna y 1840 para Sonnet 5.5.
- AA-Briefcase v1.1: Haiku 5.5 obtuvo 1578 puntos, en comparación con 614 para Haiku 4.5, 1336 para GPT-6 Luna y 1824 para Sonnet 5.5.
- Subconjunto fuera de línea OSWorld 2.1: Haiku 5.5 obtuvo un 72,4 %, en comparación con un 15,7 % para Haiku 4.5, un 48,9 % para GPT-6 Luna y un 83,9 % para Sonnet 5.5.
- Examen final de la humanidad: Haiku 5.5 obtuvo un 45,9 % sin herramientas y un 57,4 % con herramientas.
- Terminal-Bench 4.0: Haiku 5.5 obtuvo un 39,2 %, en comparación con un 0,0 % para Haiku 4.5, un 16,4 % para GPT-6 Luna y un 70,6 % para Sonnet 5.5.
- FrontierCode 1.1 (Principal): Haiku 5.5 obtuvo un 46,4 %, en comparación con un 42,4 % para GPT-6 Luna y un 52,1 % para Sonnet 5.5.
- Chartography: Haiku 5.5 obtuvo un 46,4 % sin herramientas, en comparación con un 6,4 % para Haiku 4.5, un 29,1 % para GPT-6 Luna y un 61,6 % para Sonnet 5.5.
Haiku 5.5 es el primer modelo de la clase Haiku de Anthropic que viene con una configuración de esfuerzo ajustable, lo que permite a los usuarios optimizar el costo o la inteligencia.
