मॉडल लॉन्च और प्रदर्शन
Anthropic ने Claude Haiku 5.5 पेश किया है, जिसे कंपनी ने अपने अब तक के सबसे सस्ते, तेज़ और सबसे सक्षम छोटे मॉडल के रूप में वर्णित किया है। यह मॉडल सारांश (summaries), संक्षेपण (compactions), डेटाबेस क्वेरी और वर्गीकरण अनुरोधों जैसे उच्च-मात्रा और लागत-संवेदनशील कार्यों के लिए डिज़ाइन किया गया है।
Anthropic के अनुसार, Claude Haiku 5.5 प्रत्येक मॉडल की मानक गति पर कंपनी का अब तक का सबसे तेज़ मॉडल है, हालांकि यह Fast Mode में Opus मॉडलों की तुलना में कम तेज़ी से चलता है।
कंपनी ने Haiku 5.5 की तुलना Haiku 4.5, GPT-6 Luna और Sonnet 5.5 से करते हुए बेंचमार्क परिणाम प्रदान किए हैं:
- GDPval-AA v2.1: Haiku 5.5 का स्कोर 1620 रहा, जबकि Haiku 4.5 का 735, GPT-6 Luna का 1437 और Sonnet 5.5 का 1840 रहा।
- AA-Briefcase v1.1: Haiku 5.5 का स्कोर 1578 रहा, जबकि Haiku 4.5 का 614, GPT-6 Luna का 1336 और Sonnet 5.5 का 1824 रहा।
- OSWorld 2.1 offline subset: Haiku 5.5 का स्कोर 72.4% रहा, जबकि Haiku 4.5 का 15.7%, GPT-6 Luna का 48.9% और Sonnet 5.5 का 83.9% रहा।
- Humanity’s Last Exam: Haiku 5.5 का स्कोर बिना टूल्स के 45.9% और टूल्स के साथ 57.4% रहा।
- Terminal-Bench 4.0: Haiku 5.5 का स्कोर 39.2% रहा, जबकि Haiku 4.5 का 0.0%, GPT-6 Luna का 16.4% और Sonnet 5.5 का 70.6% रहा।
- FrontierCode 1.1 (Main): Haiku 5.5 का स्कोर 46.4% रहा, जबकि GPT-6 Luna का 42.4% और Sonnet 5.5 का 52.1% रहा।
- Chartography: Haiku 5.5 का स्कोर बिना टूल्स के 46.4% रहा, जबकि Haiku 4.5 का 6.4%, GPT-6 Luna का 29.1% और Sonnet 5.5 का 61.6% रहा।
Haiku 5.5 Anthropic का पहला Haiku-क्लास मॉडल है जो एडजस्टेबल एफर्ट सेटिंग के साथ आता है, जिससे उपयोगकर्ता लागत या इंटेलिजेंस के लिए ऑप्टिमाइज़ कर सकते हैं।
