safetensors: формат, квантизация, runtime и память принадлежат одному artifact

Компактная авторегрессионная модель семейства Llama для генерации текста, предварительно обученная на FineWeb.

Подходит для: эксперименты с компактными языковыми моделями · генерация коротких текстовых продолжений · изучение авторегрессионной архитектуры Llama

Слитая 70-миллиардная модель Llama для творческого письма, ролевых диалогов и совместного создания приключенческих историй.

Подходит для: совместное написание художественной прозы · ведение ролевых диалогов от лица персонажа · создание приключенческих историй

Компактная LLaMA-совместимая языковая модель для локальных агентных рабочих процессов, диагностики Linux и генерации кода.

Подходит для: диагностика проблем Linux-серверов · помощь в системном администрировании и настройке инфраструктуры · генерация скриптов Bash и Python для автоматизации

Экспериментальная сжатая версия Llama 2 Chat для исследования влияния удаления параметров на безопасность и полезность модели.

Подходит для: сравнение безопасности сжатых языковых моделей · измерение устойчивости чат-моделей к вредоносным запросам · анализ компромисса между отказами и полезностью ответов

Экспериментальная производная Llama 3.2 1B Instruct с изменёнными весами для исследований отказов, интерпретируемости и оценки безопасности.

Подходит для: исследование механизмов отказа языковых моделей · red teaming моделей, склонных отвечать на вредоносные запросы · оценка защитных механизмов и поведения модели

Компактная модель семейства LLaMA на 24,8 млн параметров для экспериментов с авторегрессионной генерацией текста и языковым моделированием.

Подходит для: эксперименты с генерацией коротких текстовых продолжений · изучение обучения авторегрессионных языковых моделей · тестирование и сравнение небольших LLaMA-моделей

Компактная модель Llama, обученная с нуля для генерации текста и экспериментов с языковыми моделями.

Подходит для: генерация продолжения текста · эксперименты с компактной авторегрессионной моделью · оценка языковой модели на бенчмарках

Компактная языковая модель семейства Llama на 1,1 млрд параметров для генерации текста и оценки на бенчмарках.

Подходит для: эксперименты с генерацией текста · оценка языковой модели на бенчмарках · исследование поведения компактных моделей Llama

Экспериментальный сжатый чекпойнт Llama 2 Chat для изучения компромиссов между безопасностью и полезностью генеративных языковых моделей.

Подходит для: сравнение защитного поведения языковых моделей после сжатия · оценка успешности атак на сжатые чат-модели · изучение восстановления поведения модели компонентами SVD

Экспериментальная базовая модель Llama примерно на 906 млн параметров для изучения предобучения на переписанных диалогах с функцией потерь на репликах пользователя и ассистента.

Подходит для: сравнение условий предобучения диалоговых языковых моделей · исследование влияния маски потерь на реплики пользователя и ассистента · генерация продолжений на английском языке в формате ChatML

Экспериментальный чекпойнт Llama 2 7B Chat, сжатый методом Basis Sharing и донастроенный для исследования компромиссов между безопасностью и полезностью.

Подходит для: измерение влияния сжатия на безопасность ответов языковой модели · сравнение методов восстановления поведения после сжатия · оценка устойчивости чат-моделей к вредоносным запросам

Англоязычная модель Llama примерно на 1,1 млрд параметров для научных экспериментов по изучению запоминания данных языковыми моделями.

Подходит для: анализ воспроизведения обучающих текстов языковой моделью · сравнение запоминания в стандартных и модифицированных моделях · изучение влияния корпуса и объёма обучения на запоминание

Базовая модель Llama с 133,3 млн параметров, обученная на 100 млрд токенов преимущественно кода и предназначенная для дальнейшей настройки и генерации текста.

Подходит для: дообучение компактной языковой модели для генерации кода · эксперименты с тонкой настройкой базовой модели Llama · исследование генерации текста на небольшой авторегрессионной модели

Экспериментальная сжатая версия Llama 2 Chat для исследования влияния сжатия и восстановления параметров на безопасность диалоговой модели.

Подходит для: оценка влияния сжатия на защиту чат-модели · сравнение правил перестановки параметров при восстановлении модели · измерение успешности атак на диалоговую модель

Экспериментальная сжатая версия Llama 2 Chat для изучения компромисса между безопасностью и полезностью диалоговых моделей.

Подходит для: исследование влияния сжатия на безопасность языковых моделей · сравнение устойчивости чат-моделей к вредоносным запросам · оценка компромисса между полезностью ответов и отказами

Экспериментальный сжатый чекпойнт Llama 2 7B Chat для исследования влияния сжатия и замены параметров на безопасность модели.

Подходит для: оценка безопасности сжатых языковых моделей · измерение успешности атак на чат-модель · сравнение восстановления поведения после сжатия

Экспериментальная сжатая версия Llama 2 7B Chat для изучения влияния удаления параметров на безопасность и полезность диалоговой модели.

Подходит для: исследование влияния сжатия на безопасность языковой модели · сравнение отказов модели на вредоносные запросы · оценка компромисса между полезностью и безопасностью чат-модели

LlamaHarmony — диалоговая языковая модель на 1,4 млрд параметров для экспериментов со слиянием LLM и изучения их возможностей.

Подходит для: эксперименты со слиянием языковых моделей · изучение поведения диалоговых LLM · обучающие демонстрации работы LLM

Экспериментальная компактная модель семейства LLaMA 2 для генерации текста и изучения уменьшенных языковых моделей.

Подходит для: эксперименты с компактной архитектурой LLaMA 2 · генерация английского текста для исследовательских прототипов · сравнение малых языковых моделей на бенчмарках

Экспериментальная LLaMA 2 70B от Maya Philippines для генерации текста, следования инструкциям и оценки составных LLM.

Подходит для: генерация ответов на текстовые запросы · выполнение инструкций на естественном языке · оценка языковой модели на бенчмарках

Экспериментальная англоязычная модель семейства Llama с активацией SwiGLU для генерации текста и изучения разреженных вычислений.

Подходит для: генерация англоязычного текста · исследование разреженности активаций SwiGLU · сравнение функций активации в языковых моделях

Экспериментальная модель Llama на 1,66 млрд параметров для исследования предобучения на переписанных диалогах с функцией потерь на репликах пользователя и ассистента.

Подходит для: исследование влияния обучающего сигнала на репликах пользователя и ассистента · сравнение условий предобучения при одинаковом числе обучающих токенов · генерация текста в формате диалога ChatML

Экспериментальная сжатая и восстановленная LoRA версия Llama 2 Chat для измерения влияния сжатия на безопасность и полезность диалоговой модели.

Подходит для: измерение устойчивости чат-модели к вредоносным запросам · сравнение безопасности моделей после сжатия SVD · оценка восстановления поведения модели с помощью LoRA