Как выбрать все теги <b> HTML
На этой веб-странице мне нужно выбрать все теги <b> </b> с помощью BeautifulSoup4.
url = "http://lib.ru/GrepSearch?Search=%E3%E5%F0%EE%E9+%ED%E0%F8%E5%E3%EE+%E2%F0%E5%EC%E5%ED%E8"
r = requests.get(url)
soup = BeautifulSoup(r.text,'html.parser')
author = soup.select('b')
print(author)
Я пытался использовать find_all() и select(), но они не отображают все теги <b> при использовании в массиве.
Можно найти здесь stackoverflow.com/questions/36108621/…. Возможно, вам придется настроить.
Ответы 2
Существуют разные синтаксические анализаторы, используемые для анализа html-документа, наиболее часто используемым из них является «html.parser». Здесь я использовал lxml, который использует как xml, так и html для анализа документа. Этот код здесь должен дать вам необработанный вывод, который вы запросили (автор и название книги). Вам все еще нужно обработать его, чтобы получить желаемый результат.
import requests
from bs4 import BeautifulSoup
requests = requests.get('http://lib.ru/GrepSearch?Search=history')
src = requests.content
soup = BeautifulSoup(src , 'lxml')
b_tags = soup.find_all('b')
for b in b_tags:
print(b.text)
Вывод такой:
Это не обязательно проблема парсера, но в любом случае этот пример должен дать вам автора и название книги, которые изначально были запрошены:
Пример
import requests, re
from bs4 import BeautifulSoup
url = "http://lib.ru/GrepSearch?Search=%E3%E5%F0%EE%E9+%ED%E0%F8%E5%E3%EE+%E2%F0%E5%EC%E5%ED%E8"
r = requests.get(url)
soup = BeautifulSoup(r.text,'html.parser')
[{"author":bTag.find_next('b').text, "name": bTag.find_next('ul').text.strip()} for bTag in soup.find_all(string='[dir] ')]
Выход
[{'author': 'Джойс Кэри', 'name': 'Герой нашего времени'},
{'author': 'Михаил Юрьевич Лермонтов', 'name': 'Герой нашего времени'},
{'author': 'Владимир Маканин',
'name': 'Андеграунд, или Герой нашего времени'}]
Не могли бы вы предоставить Как создать минимальный воспроизводимый пример, пожалуйста. Было бы здорово и помогает всем понять. Спасибо