Как протестировать модель RASA?

Я пытаюсь написать свой собственный чат-бот с фреймворком RASA.
Прямо сейчас я просто играю с этим, и у меня есть следующий фрагмент кода для учебных целей.

from rasa.nlu.training_data import load_data
from rasa.nlu.config import RasaNLUModelConfig
from rasa.nlu.model import Trainer
from rasa.nlu import config
training_data = load_data("./data/nlu.md")
trainer = Trainer(config.load("config.yml"))
interpreter = trainer.train(training_data)
model_directory = trainer.persist("./models/nlu",fixed_model_name="current")

Теперь я прочитал, что если я хочу проверить это, я должен сделать что-то вроде этого.

from rasa.nlu.evaluate import run_evaluation
run_evaluation("nlu.md", model_directory)

Но этот код больше не доступен ни в rasa.nlu.evaluate, ни в rasa.nlu.test!
Как же тогда проверить модель RASA?

Анализ настроения постов в Twitter с помощью Python, Tweepy и Flair
Анализ настроения постов в Twitter с помощью Python, Tweepy и Flair
Анализ настроения текстовых сообщений может быть настолько сложным или простым, насколько вы его сделаете. Как и в любом ML-проекте, вы можете выбрать...
7 лайфхаков для начинающих Python-программистов
7 лайфхаков для начинающих Python-программистов
В этой статье мы расскажем о хитростях и советах по Python, которые должны быть известны разработчику Python.
Установка Apache Cassandra на Mac OS
Установка Apache Cassandra на Mac OS
Это краткое руководство по установке Apache Cassandra.
Сертификатная программа "Кванты Python": Бэктестер ансамблевых методов на основе ООП
Сертификатная программа "Кванты Python": Бэктестер ансамблевых методов на основе ООП
В одном из недавних постов я рассказал о том, как я использую навыки количественных исследований, которые я совершенствую в рамках программы TPQ...
Создание персонального файлового хранилища
Создание персонального файлового хранилища
Вы когда-нибудь хотели поделиться с кем-то файлом, но он содержал конфиденциальную информацию? Многие думают, что электронная почта безопасна, но это...
Создание приборной панели для анализа данных на GCP - часть I
Создание приборной панели для анализа данных на GCP - часть I
Недавно я столкнулся с интересной бизнес-задачей - визуализацией сбоев в цепочке поставок лекарств, которую могут просматривать врачи и...
1
0
1 321
1
Перейти к ответу Данный вопрос помечен как решенный

Ответы 1

Ответ принят как подходящий

Модуль был переименован. Пожалуйста, импортируйте

from rasa.nlu.test import run_evaluation

В качестве альтернативы вы теперь также делаете

from rasa.nlu import test
test_result = test(path_to_test_data, unpacked_model)

intent_evaluation_report = test_result["intent_evaluation"]["report"]
print(intent_evaluation_report)

Из консоли iPython я могу распечатать только прогнозы (+ метрики) в формате JSON, в то время как по этой ссылке (в направленииdatascience.com/…) я вижу, что ранее она делала в качестве вывода матрицу путаницы. Это все еще возможно?

Gianmarco F. 28.05.2019 08:52

Конечно. Самый простой способ, вероятно, просто запустить rasa test в вашей командной строке (используя Rasa 1.0). Какую версию вы сейчас используете? Это действительно должно работать с командой сверху.

Tobias 29.05.2019 16:04

Я использую версию 1.0. Что, если я захочу увидеть матрицу путаницы (через графику) с Python? Нет ли способа сделать это?

Gianmarco F. 29.05.2019 16:06

Другие вопросы по теме