Многоязычная поддержка
Claude отлично справляется с задачами на разных языках, сохраняя высокую производительность относительно английского языка.
Обзор
Claude демонстрирует надежные многоязычные возможности, показывая особенно хорошие результаты в zero-shot задачах на разных языках. Модель поддерживает стабильную относительную производительность как для широко распространенных, так и для менее ресурсных языков, что делает ее надежным выбором для многоязычных приложений.
Обратите внимание, что Claude способен работать со многими языками помимо тех, что представлены в тестах ниже. Мы рекомендуем тестировать модель с любыми языками, релевантными для ваших конкретных случаев использования.
Данные о производительности
Ниже приведены оценки zero-shot chain-of-thought для моделей Claude 3.7 Sonnet и Claude 3.5 на разных языках, показанные в процентах относительно производительности на английском языке (100%):
| Язык | Claude 3.7 Sonnet1 | Claude 3.5 Sonnet (New) | Claude 3.5 Haiku |
|---|---|---|---|
| Английский (базовый, фиксированный 100%) | 100% | 100% | 100% |
| Испанский | 97.6% | 96.9% | 94.6% |
| Португальский (Бразилия) | 97.3% | 96.0% | 94.6% |
| Итальянский | 97.2% | 95.6% | 95.0% |
| Французский | 96.9% | 96.2% | 95.3% |
| Индонезийский | 96.3% | 94.0% | 91.2% |
| Немецкий | 96.2% | 94.0% | 92.5% |
| Арабский | 95.4% | 92.5% | 84.7% |
| Китайский (упрощенный) | 95.3% | 92.8% | 90.9% |
| Корейский | 95.2% | 92.8% | 89.1% |
| Японский | 95.0% | 92.7% | 90.8% |
| Хинди | 94.2% | 89.3% | 80.1% |
| Бенгальский | 92.4% | 85.9% | 72.9% |
| Суахили | 89.2% | 83.9% | 64.7% |
| Йоруба | 76.7% | 64.9% | 46.1% |
1 С использованием расширенного мышления и 16,000 budget_tokens.
Эти метрики основаны на английских тестовых наборах MMLU (Massive Multitask Language Understanding), которые были переведены на 14 дополнительных языков профессиональными переводчиками, как документировано в репозитории OpenAI simple-evals. Использование профессиональных переводчиков для этой оценки обеспечивает высокое качество переводов, что особенно важно для языков с меньшим количеством цифровых ресурсов.
Лучшие практики
При работе с многоязычным контентом:
- Предоставляйте четкий языковой контекст: Хотя Claude может автоматически определять целевой язык, явное указание желаемого языка ввода/вывода повышает надежность. Для улучшения беглости речи вы можете попросить Claude использовать “идиоматическую речь, как если бы он был носителем языка.”
- Используйте родные системы письма: Отправляйте текст в его родной системе письма, а не в транслитерации для оптимальных результатов
- Учитывайте культурный контекст: Эффективная коммуникация часто требует культурной и региональной осведомленности помимо чистого перевода
Мы также рекомендуем следовать нашим общим рекомендациям по инженерии промптов для улучшения производительности Claude.
Особенности языковой поддержки
- Claude обрабатывает ввод и генерирует вывод на большинстве мировых языков, использующих стандартные символы Unicode
- Производительность варьируется в зависимости от языка, с особенно сильными возможностями в широко распространенных языках
- Даже в языках с меньшим количеством цифровых ресурсов Claude сохраняет значимые возможности
Was this page helpful?