Использование callable_iterator (re.finditer) приводит к зависанию Python

У меня есть функция, которая вызывается для каждой строки текста.

def tokenize_line(line: str, cmd = ''):
    matches = re.finditer(Patterns.SUPPORTED_TOKENS, line)
    tokens_found, not_found, start_idx = [], [], 0
    print(matches)
    for match in matches:
        pass
        # Rest of code

Результат print(matches) выглядит примерно так: <callable_iterator object at 0x0000021201445000>

Однако когда я преобразую итератор в список:

matches = list(re.finditer(Patterns.SUPPORTED_TOKENS, line))

или когда я повторяю с помощью for:

for match in matches:
   print(match)

...Питон зависает.

Эта проблема возникает непоследовательно. Например:

tokenize_line('$color AS $length') # Works fine
tokenize_line('FALSE + $length IS GT 7 + $length IS 4') # Freezes

Итак, проблема возникает при преобразовании callable_iterator в список или переборе по нему.

Вот шаблон (Patterns.SUPPORTED_TOKENS), который я использую:

(°p\d+°|°a\d+°|°m\d+°)|((?<!\S)(?:!\'(?:\\.|[^\'\n\\])*\'|!"(?:\\.|[^\n"\\])*")(?!\S))|((?:\'(?:\\.|[^\'\n\\])*\'|"(?:\\.|[^\n"\\])*"))|((\{(.*)\}))|((?<!\S)([@$][\w]*(?:\.[\w]*)*)(?!\S))|((?<!\d)-?\d*\.?\d+)|(\*\*|[\+\-\*\(\)/%\^]|==|&&|\|\||!=|>=|<=|>|<|~~|!~~|::|!::)|([\:/])|(\b(?:AS|AND|AT|:|BETWEEN|BY|FROM|IN|INTO|ON|OF|OR|THAN|TO|USING|WITH)\b)|(\b[a-zA-Z_][a-zA-Z0-9_]* *((?:[^;()\'""]*|"(?:[^"\\]|\\.)*"|\'(?:[^\'\\]|\\.)*\'|\([^)]*\))*?;))|((\b(?:EMPTY|STRING|NUMBER|BOOL|ARRAY|MAP|TRUE|FALSE|NULL|UNKNOWN|DOTALL|IGNORECASE|MULTILINE|ARRAY_ARRAY|ARRAY_STRING|ARRAY_MAP|ARRAY_NUMBER|ARRAY_NULL|DOT|SPACE|NEWLINE|SEMICOLON|COLON|HASH|COMMA|TAB)\b)|(\b(?:IS NOT LT|IS NOT GT|IS NOT GEQ|IS NOT LEQ|IS NOT|IS LT|IS GT|IS GEQ|IS LEQ|IS|NOT IN|NOT|IN|HAS NOT|HAS|AND|OR)\b))

Объяснение шаблона регулярного выражения:

Пользовательские токены: Соответствуют определенным пользовательским токенам, которые начинаются с определенных символов и сопровождаются цифрами.

Строки в кавычках: Соответствует строкам как в одинарных, так и в двойных кавычках, включая строки с escape-символами. Содержимое фигурных скобок: соответствует всему, что заключено в фигурные скобки.

Переменные: Соответствует переменным, которые начинаются с определенных символов (например, @ или $) и могут включать точки для вложенных свойств.

Числа: Соответствует как целым числам, так и числам с плавающей запятой, включая отрицательные числа.

Операторы: Соответствует различным математическим и логическим операторам. Двоеточия и косые черты: Соответствует определенным символам пунктуации, таким как двоеточия и косые черты.

Ключевые слова: Соответствует определенным ключевым словам, зарезервированным в языке. Определения функций: Сопоставляет определения функций или аналогичные структуры, гарантируя, что они соответствуют определенным правилам синтаксиса.

Типы данных и модификаторы: Соответствует ключевым словам, которые представляют типы данных или модификаторы.

Логические операторы: Соответствует сложным логическим операторам, используемым в условных выражениях.

Пример:

import re

SUPPORTED_TOKENS = r'(°p\d+°|°a\d+°|°m\d+°)|((?<!\S)(?:!\'(?:\\.|[^\'\n\\])*\'|!"(?:\\.|[^\n"\\])*")(?!\S))|((?:\'(?:\\.|[^\'\n\\])*\'|"(?:\\.|[^\n"\\])*"))|((\{(.*)\}))|((?<!\S)([@$][\w]*(?:\.[\w]*)*)(?!\S))|((?<!\d)-?\d*\.?\d+)|(\*\*|[\+\-\*\(\)/%\^]|==|&&|\|\||!=|>=|<=|>|<|~~|!~~|::|!::)|([\:/])|(\b(?:AS|AND|AT|:|BETWEEN|BY|FROM|IN|INTO|ON|OF|OR|THAN|TO|USING|WITH)\b)|(\b[a-zA-Z_][a-zA-Z0-9_]* *((?:[^;()\'""]*|"(?:[^"\\]|\\.)*"|\'(?:[^\'\\]|\\.)*\'|\([^)]*\))*?;))|((\b(?:EMPTY|STRING|NUMBER|BOOL|ARRAY|MAP|TRUE|FALSE|NULL|UNKNOWN|DOTALL|IGNORECASE|MULTILINE|ARRAY_ARRAY|ARRAY_STRING|ARRAY_MAP|ARRAY_NUMBER|ARRAY_NULL|DOT|SPACE|NEWLINE|SEMICOLON|COLON|HASH|COMMA|TAB)\b)|(\b(?:IS NOT LT|IS NOT GT|IS NOT GEQ|IS NOT LEQ|IS NOT|IS LT|IS GT|IS GEQ|IS LEQ|IS|NOT IN|NOT|IN|HAS NOT|HAS|AND|OR)\b))'

def tokenize_line(line: str, cmd = ''):
    if not line:
        return [], []
    
    matches = list(re.finditer(SUPPORTED_TOKENS, line))
    print(list)
    
    

lines = [
    '$color AS $length',
    'EMPTY + $length IS GT 7 + $length IS 4'
]


for x in lines:
    tokenize_line(x)

Будем очень признательны за любую помощь, чтобы понять, почему это происходит и как это исправить!