Claude Haiku 5.5: можливості, обмеження та завдання

Що нового в Claude Haiku 5.5

Anthropic називає Haiku 5.5 своєю найдешевшою, найшвидшою та найпродуктивнішою маленькою моделлю. Це перша модель класу Haiku з регульованим налаштуванням зусилля від низького до максимального, тож розробники можуть міняти вартість і затримку на можливості.

Ціни починаються з 0,10 доларів США за мільйон вхідних токенів і 0,50 доларів США за мільйон вихідних токенів для запитів до 100 000 токенів, зростаючи до 0,50 і 2,50 доларів США для більш довгих запитів. За словами Anthropic, економія порівняно з Haiku 4.5 становить у середньому близько 75%: 90% для запитів до 100 тисяч токенів і 50% для більших.

Джерела: Anthropic: Introducing Claude Haiku 5.5

Контрольні показники: великий стрибок у порівнянні з Haiku 4.5, все ще нижче Sonnet

Anthropic повідомляє про 72,4% офлайнової підмножини OSWorld 2.1 проти 15,7% для Haiku 4.5 та 45,9% про Останній іспит Людства без інструментів проти 10,2%. На Terminal-Bench 4.0 він набрав 39,2%, а Haiku 4.5 набрав 0%.

У тих самих таблицях Sonnet 5.5 має вищі бали за всіма переліченими тестами, і Anthropic каже, що Sonnet 5.5 і Opus 5.5 залишаються кращими виборами для складних завдань агентського кодування.

Джерела: Anthropic: Introducing Claude Haiku 5.5

Рекомендоване використання та обмеження Антропні списки

Anthropic рекомендує Haiku 5.5 для великого обсягу, чутливої до вартості роботи, такої як резюме, запити до бази даних і класифікація; як субагент, який працює разом з Opus 5.5 або Sonnet 5.5; а також для завдань, чутливих до швидкості, таких як підтримка клієнтів і використання браузера.

Він також перераховує обмеження: Haiku 5.5 використовує новий токенізатор, тому завдання споживає трохи більше токенів; його гарантії кібербезпеки суворіші, ніж у Haiku 4.5; і він працює повільніше, ніж моделі Opus у швидкому режимі.

• Добре підходить: підсумки, теги та маршрутизація, вилучення, короткі відповіді служби підтримки.
• Добре підходить: підзавдання, які більша модель планує та перевіряє.
• Слабша відповідність: тривала багатоетапна робота з кодування, яка потребує ретельного планування.

Джерела: Anthropic: Introducing Claude Haiku 5.5

Хайку 5.5 або Сонет: як вирішити

Цінова різниця робить Haiku привабливим для всього, що ви запускаєте тисячі разів. Як проста арифметика з опублікованих тарифів Anthropic: один мільйон коротких запитів із 2000 вхідних токенів кожен становить 2 мільярди вхідних токенів, приблизно 200 доларів США на Haiku 5.5 за тарифом нижче 100 тис. до вихідних витрат, проти десятикратної ціни за стару вхідну ціну Haiku 4.5.

Наше емпіричне правило полягає в тому, щоб починати з найдешевшої моделі, яка проходить тестовий набір ваших власних прикладів, і рухатися вгору лише там, де вона не проходить. Зберігайте невдачі: вони показують, які саме завдання заслуговують Сонета.

Перевірте невелику модель на справжньому великому завданні

Зберіть десять реальних прикладів завдань, які ви хочете автоматизувати, як-от повідомлення клієнтів, короткі документи або запити до служби підтримки, з відповіддю, яку ви вважаєте правильною. Запустіть підказку нижче та порівняйте мітки зі своїми. Якщо більшість збігається, а промахи легко зловити, можливо, достатньо маленької моделі. Видаліть особисті дані, перш ніж щось вставляти.

Класифікуйте кожне повідомлення нижче за однією з цих категорій: [список категорій]. Для кожного повідомлення: номер, категорія, надійність (висока, середня або низька) і причина в одному рядку. Якщо повідомлення не відповідає жодній категорії, скажіть це замість вгадування. Повідомлення: [вставити 10 повідомлень, по одному на рядок]