Может ли кто-нибудь помочь мне с ошибкой при использовании функции nltk word_tokenize?

У меня на Mac установлен nltk. Ниже приведен мой простой код для использования функции nltk word_tokenize. И я получаю эту ошибку. Пожалуйста, порекомендуйте!

import nltk

sentence = "I kN2ow Y1Ou."

s = sentence.lower()
words = nltk.word_tokenize(s)

print(words)

Ошибка:

**********************************************************************
  Resource punkt not found.
  Please use the NLTK Downloader to obtain the resource:

  >>> import nltk
  >>> nltk.download('punkt')
  
  For more information see: https://www.nltk.org/data.html

  Attempted to load tokenizers/punkt/PY3/english.pickle

  Searched in:
    - '/Users/moeheinag/nltk_data'
    - '/Library/Frameworks/Python.framework/Versions/3.8/nltk_data'
    - '/Library/Frameworks/Python.framework/Versions/3.8/share/nltk_data'
    - '/Library/Frameworks/Python.framework/Versions/3.8/lib/nltk_data'
    - '/usr/share/nltk_data'
    - '/usr/local/share/nltk_data'
    - '/usr/lib/nltk_data'
    - '/usr/local/lib/nltk_data'
    - ''
**********************************************************************

Итак, я просто запустил терминал:

import nltk
nltk.download('punkt')

И получил эти ошибки:

[nltk_data] Error loading punkt: <urlopen error [SSL:
[nltk_data]     CERTIFICATE_VERIFY_FAILED] certificate verify failed:
[nltk_data]     unable to get local issuer certificate (_ssl.c:1124)>
False

ошибка буквально говорит вам, что делать.

— 26.12.2020 08:36

python nltk

26.12.2020 08:32

Почему в Python есть оператор "pass"?

Оператор pass в Python - это простая концепция, которую могут быстро освоить даже новички без опыта программирования.

Некоторые методы, о которых вы не знали, что они существуют в Python

Python - самый известный и самый простой в изучении язык в наши дни. Имея широкий спектр применения в области машинного обучения, Data Science,...

Основы Python Часть I

Вы когда-нибудь задумывались, почему в программах на Python вы видите приведенный ниже код?

LeetCode - 1579. Удаление максимального числа ребер для сохранения полной проходимости графа

Алиса и Боб имеют неориентированный граф из n узлов и трех типов ребер:

Оптимизация кода с помощью тернарного оператора Python

И последнее, что мы хотели бы показать вам, прежде чем двигаться дальше, это

Советы по эффективной веб-разработке с помощью Python

Как веб-разработчик, Python может стать мощным инструментом для создания эффективных и масштабируемых веб-приложений.

143

Перейти к ответу Данный вопрос помечен как решенный

Ответы 1

Ответ принят как подходящий

Вам необходимо загрузить модуль punkt, как указано

Откройте Terminal на вашем Mac, выполните - python, затем приведенные ниже команды

nltk использует предварительно обученные токенизаторы слов и предложений, которые необходимо загружать отдельно

>>> import nltk
>>> nltk.download('punkt')

Если загрузка не удалась, используйте ссылку ниже, ссылку

import nltk
import ssl

try:
    _create_unverified_https_context = ssl._create_unverified_context
except AttributeError:
    pass
else:
    ssl._create_default_https_context = _create_unverified_https_context

nltk.download()

Так что я только что сделал это, и я получил несколько ошибок. Я пересмотрю свой оригинальный пост, чтобы включить его.

— 26.12.2020 08:39

Я пересмотрел его.

— 26.12.2020 08:45

26.12.2020 08:35