/ Модель

Характеристики

Контекст
512 токенов
Архитектура
distilbert · dense
Опубликована
2 мар 2022

environmental-due-diligence-model

Классификация текстаТекст → label3 профессии

Англоязычный классификатор на базе DistilBERT для выявления загрязнений и мероприятий по их устранению при экологической проверке площадок.

54скачиваний за 30 дней7лайковвеса обновлены2 июл 2023

Бенчмарки

Как модель справилась с задачами пользователей ailist и что о ней публикуют открытые лидерборды

Публичные оценки

Из открытых лидербордов. Сравнивайте результаты одного теста при одинаковых условиях — отсутствие оценки не значит, что модель хуже.

В подключённых источниках результатов для этой модели пока нет.

Что умеет модель

Описание составлено по карточке модели и метаданным Hugging Face

Модель environmental-due-diligence-model разработана Deepak John Reji и Afreen Aman для классификации текстов в рамках экологической проверки площадок. Она обучена на базе distilbert-base-uncased и предназначена для выявления сведений о загрязнении и мерах по его устранению, как уже проведённых, так и запланированных. Модель может распознавать источник и масштаб загрязнения, виды загрязнителей, их распространение и взаимодействие с подземными, поверхностными и другими водными объектами.

Это DistilBERT-классификатор последовательностей для англоязычного текста с контекстом до 512 токенов. Авторы обучали модель 10 эпох на открытых новостных и собственных данных. Репозиторий содержит веса в формате TensorFlow. Лицензия в предоставленных данных не указана.

Сценарии применения

  • поиск сведений о загрязнении в материалах экологической проверки площадки
  • извлечение упоминаний об источниках и масштабах загрязнения из новостей и документов
  • выявление типов загрязнителей и их распространения
  • поиск сведений о загрязнении подземных и поверхностных вод
  • определение упоминаний о проведённых или запланированных мерах по устранению загрязнения

Ограничения

Модель обучена для англоязычных текстов и ограничена контекстом в 512 токенов. Качество на иных типах документов и за пределами экологической проверки площадок не установлено.

Для каких профессий подходит3

Разделы каталога профессий, в задачах которых используется эта модель

Все профессии

Карточка модели

README от автора на Hugging Face, как он его опубликовал

Открыть на Hugging Face

About the Model

An Environmental due diligence classification model, trained on customized environmental Dataset to detect contamination and remediation activities (both prevailing as well as planned) as a part of site assessment process. This model can identify the source of contamination, the extent of contamination, the types of contaminants present at the site, the flow of contaminants and their interaction with ground water, surface water and other surrounding water bodies .

This model was built on top of distilbert-base-uncased model and trained for 10 epochs with a batch size of 16, a learning rate of 5e-5, and a maximum sequence length of 512.

  • Dataset : Open Source News data + Custom data
  • Carbon emission 0.1069 Kg

Usage

The easiest way is to load through the pipeline object offered by transformers library.

from transformers import AutoTokenizer, TFAutoModelForSequenceClassification
from transformers import pipeline
tokenizer = AutoTokenizer.from_pretrained("d4data/environmental-due-diligence-model")
model = TFAutoModelForSequenceClassification.from_pretrained("d4data/environmental-due-diligence-model")

classifier = pipeline('text-classification', model=model, tokenizer=tokenizer) # cuda = 0,1 based on gpu availability
classifier("At the every month post-injection monitoring event, TCE, carbon tetrachloride, and chloroform concentrations were above CBSGs in three of the wells")

Author

This model is part of the Research topic "Environmental Due Diligence" conducted by Deepak John Reji, Afreen Aman. If you use this work (code, model or dataset), please cite as:

Environmental Due Diligence, (2020), https://www.sciencedirect.com/science/article/pii/S2665963822001117

You can support me here :)

Как запустить

На своей GPU в ailist. Цена — по текущим предложениям провайдеров

GPU в ailist

Универсальный рантайм · text-classification

Нельзя запустить

В репозитории нет весов в формате PyTorch/safetensors.

Класс архитектуры
DistilBertForSequenceClassification
Ревизия весов
3332a50

0 моделей