Пипарсинг — возвращение к основам

Мой друг! Вы забыли обернуть необработанную строку в list!

Я тестировал 30 минут и почувствовал, что что-то не так, а затем нашел это в документе:

run_tests(тесты: Union[str, List[str]], ...) -> ...

Выполните выражение синтаксического анализа для серии тестовых строк, показывая каждый тест, результаты анализа или места, где синтаксический анализ не удался. Быстрый и простой способ выполнить выражение синтаксического анализа для списка образцов строк.

Параметры:

тесты - список отдельных тестовых строк или многострочная строка тестовых строк.

По сути, вы (и я за последние полчаса) делаете это:

grammar.run_tests(tw.dedent(text).strip())

...Я говорил ему рассматривать каждую строку как отдельные тесты!

"""  # You are a test 0 now!
    A) Red  # You are a test 1
    B) Green  # test 2 for you,
    C) Blue  # test 3 for ya,
""" # finally you're test 4! Mhahahah!

(И, конечно же, использование pp.line_end, чтобы линия действительно потребляла end of line)

>>> import pyparsing as pp
... import textwrap as tw
...
... text = (
...     """
...     A) Red
...     B) Green
...     C) Blue
...     """
... )
...
... a = pp.AtLineStart("A)") + pp.Word(pp.alphas) + pp.line_end.suppress()
... b = pp.AtLineStart("B)") + pp.Word(pp.alphas) + pp.line_end.suppress()
... c = pp.AtLineStart("C)") + pp.Word(pp.alphas)
...
... grammar = a + b + c
... grammar.run_tests([tw.dedent(text).strip()])


A) Red
B) Green
C) Blue
['A)', 'Red', 'B)', 'Green', 'C)', 'Blue']
>>>

Спасибо за вашу настойчивость в изучении pyparsing! В документации AtLineStart определенно есть ошибка, которая вам мешает, и я исправлю ее сегодня днём или вечером.

Прежде всего, вот код из документации AtLineStart:

import pyparsing as pp

# from the docstring for AtLineStart
test = '''\
AAA this line
AAA and this line
  AAA but not this one
B AAA and definitely not this one
'''

for t in (pp.AtLineStart('AAA') + pp.rest_of_line).search_string(test):
    print(t)

Почти как ваш пример, но с некоторыми важными отличиями. Этот код работает, потому что он использует search_string. AtLineStart не пропускает пробелы — они совпадают ТОЛЬКО в начале строки. Оглядываясь назад, можно сказать, что использование search_string было неудачным, поскольку оно маскирует строгое соответствие начала строки, которое обеспечивает AtLineStart.

Проблема в вашем примере заключается в том, что после анализа Word(pp.alphas) после "A)" синтаксический анализатор позиционируется в \n в конце строки - AtLineStart ТОЛЬКО соответствует, если он позиционируется на символе, который является первым символом во всем вводе. строка или первый символ после новой строки.

Мы исправляем это, явно анализируя новую строку:

# You'll see the \n's in the output - suppress this if you don't like them
NL = pp.LineEnd()
a = pp.AtLineStart("A)") + pp.Word(pp.alphas) + NL
b = pp.AtLineStart("B)") + pp.Word(pp.alphas) + NL
c = pp.AtLineStart("C)") + pp.Word(pp.alphas) + NL

grammar = a + b + c

Как услужливо заметил @jupiterbjy, когда run_tests дается одна строка, он обрабатывает ее как doctest, при этом каждая строка является отдельным тестом (на самом деле вы также можете перемежать пустые строки и комментарии '#', чтобы аннотировать выходные данные теста) . Чтобы заставить run_tests работать с многострочным тестом, сделайте его одной строкой с \n или заключите строку в тройных кавычках в [], чтобы явно создать свой собственный список тестов - тогда этот список может содержать несколько многострочных тестов. струны.

Вот код, который я использовал, чтобы попытаться проанализировать ваш ввод и показать исключение:

try:
    result = grammar.parse_string(textwrap.dedent(text).strip())
except ParseException as pe:
    print(pp.testing.with_line_numbers(textwrap.dedent(text).strip(), eol_mark = "<"))
    print(pe.explain())
else:
    print(result.dump())

С вашей исходной грамматикой это печатает:

            1
   1234567890
 1:A) Red<
 2:B) Green<
 3:C) Blue<

A) Red
      ^
ParseException: not found at line start, found '\n'  (at char 6), (line:1, col:7)

С добавленными условиями NL вы увидите:

['A)', 'Red', '\n', 'B)', 'Green', '\n', 'C)', 'Blue']

(Перечитывая ответ @jupiterbjy, похоже, что они также включили предложение «разобрать концы строк», так что их ответ был бы хорошим ответом, а мой может быть просто независимым подтверждением «да, то, что они сказали».)