/ Модель

Характеристики

Контекст
131 072 токена
Параметры
7,5 млрд
Размер весов
16,1 ГБ
Лицензия
Llama 3.1
Архитектура
llama · dense
Базовая модель
Meta-Llama-3.1-8B-Instruct
Опубликована
6 сен 2024

OPI-Llama-3.1-8B-Instruct

Генерация текстаТекст → текст3 профессии

Дообученная на инструкциях OPI модель Llama 3.1 для генерации ответов по задачам, связанным с белками и биологией.

144скачиваний за 30 дней4лайкавеса обновлены12 мар 2025

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Тесты пользователейпока нет

Никто ещё не опубликовал тест этой модели. Соберите бенчмарк из своих задач — результат появится здесь.

  1. Добавьте модель в бенчмарк

    Вместе с другими моделями категории «Текст» — сравнение идёт внутри одной категории.

  2. Опишите свои задачи

    Напишите запросы, при необходимости приложите файлы и эталонные ответы.

  3. Запустите и опубликуйте

    Модели ответят на каждую задачу, судья оценит ответы. Опубликованный результат появится на этой странице.

Публичные оценки6

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

  • MATH Lvl 5

    MATH Lvl 5 Raw · выше — лучше

    Результат

    0,0136

    Open LLM v2 · архив

    Публичная таблицадругая ревизия

  • BBH

    BBH Raw · выше — лучше

    Результат

    0,3551

    Open LLM v2 · архив

    Публичная таблицадругая ревизия

  • MMLU-PRO

    MMLU-PRO Raw · выше — лучше

    Результат

    0,2124

    Open LLM v2 · архив

    Публичная таблицадругая ревизия

  • GPQA

    GPQA Raw · выше — лучше

    Результат

    0,2743

    Open LLM v2 · архив

    Публичная таблицадругая ревизия

  • MUSR

    MUSR Raw · выше — лучше

    Результат

    0,3233

    Open LLM v2 · архив

    Публичная таблицадругая ревизия

  • IFEval

    IFEval Raw · выше — лучше

    Результат

    0,2075

    Open LLM v2 · архив

    Публичная таблицадругая ревизия

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

OPI-Llama-3.1-8B-Instruct — языковая модель BAAI, дообученная на полном наборе инструкций OPI из 1,61 млн примеров на основе Meta-Llama-3.1-8B-Instruct. Она предназначена для диалогового выполнения инструкций и генерации ответов по задачам, связанным с белками и биологией. Модель имеет плотную архитектуру LlamaForCausalLM, содержит 7,5 млрд параметров и поддерживает контекст до 131 072 токенов; в репозитории представлены веса safetensors.

Модель подходит для исследовательских рабочих процессов в биологии и life sciences, где требуется отвечать на вопросы или выполнять инструкции по белковым задачам. Карточка ссылается на публикацию о наборе OPI и сообщает об оценке на девяти задачах, но подробности таблицы результатов в предоставленном README опущены. Модель поддерживает английский язык. Условия использования наследуют лицензию Llama 3.1 (llama3.1); перед применением необходимо соблюдать её ограничения.

Сценарии применения

  • ответы на вопросы о белках
  • выполнение инструкций по задачам биологии
  • помощь в исследовательских задачах в области наук о жизни

Ограничения

Предоставленный README не содержит подробных результатов оценки, хотя сообщает о тестировании на девяти задачах. Для использования действуют условия лицензии Llama 3.1.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

OPI_logo

Github:

https://github.com/baaihealth/opi

Paper:

OPI: An Open Instruction Dataset for Adapting Large Language Models to Protein-Related Tasks has been accepted by NeurIPS 2024 Workshop: Foundation Models for Science: Progress, Opportunities, and Challenges.

Model Card of OPI-Llama-3.1-8B-Instruct

OPI-Llama-3.1-8B-Instruct was fine-tuned from the Meta-Llama-3.1-8B-Instruct model using the complete OPI training set (i.e.,OPI_full_1.61M_train.json). For more details of training and testing, please visit https://github.com/baaihealth/opi.

Overview

Evaluation of OPI-Llama-3.1-8B-Instruct on 9 tasks

Each testing result is derived from the Meta-Llama-3.1-8B-Instruct model that has been fine-tuned using OPI_full_1.61M.json and subsequently evaluated on the respective testing set for each specific task.

Prediction comparison with SOTA mdoels

model_compare model_compare model_compare model_compare model_compare model_compare model_compare model_compare model_compare

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм

Можно запустить

Подбираем GPU…

Класс архитектуры
LlamaForCausalLM
Ревизия весов
149e1e0

0 моделей