Извлечение начального и конечного индексов токена с использованием spacy

Я просматриваю множество предложений и пытаюсь извлечь начальный и конечный индексы слова в данном предложении.

Например, ввод выглядит следующим образом:

«Это предложение написано на английском языке носителем английского языка».

И мне нужен диапазон слова «английский», который в данном случае равен: (30,37) и (50, 57).

Примечание. Мне указали на этот ответ (Получить позицию слова в предложении с пробелом)

Но этот ответ не решает мою проблему. Это может помочь мне получить начальный символ токена, но не конечный индекс.

Вся помощь приветствуется

Отвечает ли это на ваш вопрос? Очень нубский вопрос для сопоставления слов и фраз Python

polm23 11.05.2022 05:10
Почему в Python есть оператор "pass"?
Почему в Python есть оператор "pass"?
Оператор pass в Python - это простая концепция, которую могут быстро освоить даже новички без опыта программирования.
Некоторые методы, о которых вы не знали, что они существуют в Python
Некоторые методы, о которых вы не знали, что они существуют в Python
Python - самый известный и самый простой в изучении язык в наши дни. Имея широкий спектр применения в области машинного обучения, Data Science,...
Основы Python Часть I
Основы Python Часть I
Вы когда-нибудь задумывались, почему в программах на Python вы видите приведенный ниже код?
LeetCode - 1579. Удаление максимального числа ребер для сохранения полной проходимости графа
LeetCode - 1579. Удаление максимального числа ребер для сохранения полной проходимости графа
Алиса и Боб имеют неориентированный граф из n узлов и трех типов ребер:
Оптимизация кода с помощью тернарного оператора Python
Оптимизация кода с помощью тернарного оператора Python
И последнее, что мы хотели бы показать вам, прежде чем двигаться дальше, это
Советы по эффективной веб-разработке с помощью Python
Советы по эффективной веб-разработке с помощью Python
Как веб-разработчик, Python может стать мощным инструментом для создания эффективных и масштабируемых веб-приложений.
1
1
42
2
Перейти к ответу Данный вопрос помечен как решенный

Ответы 2

Ответ принят как подходящий

Вы можете сделать это с помощью re в чистом питоне:

s = "This is a sentence written in english by a native English speaker."

import re
[(i.start(), i.end()) for i in re.finditer('ENGLISH', s.upper())]

#output
[(30, 37), (50, 57)]

Вы также можете сделать в пространстве:

import spacy
nlp=spacy.load("en_core_web_sm")
doc=nlp("This is a sentence written in english by a native English speaker.")
for ent in doc.ents:
    if ent.text.upper()=='ENGLISH':
      print(ent.start_char,ent.end_char)

Используя идею из ответа, на который вы ссылаетесь, вы можете сделать что-то вроде этого

from spacy.lang.en import English
nlp = English()
s = nlp("This is a sentence written in english by a native English speaker")
boundaries = []
for idx, i in enumerate(s[:-1]):
    if i.text.lower() == "english":
        boundaries.append((i.idx, s[idx+1].idx-1))

Другие вопросы по теме