Как получить доступ к типу места (виджет-панель-ссылка) из Google Maps из python с помощью Beautiful Soup
Я пытаюсь получить тег Американский ресторан под именем El Merendero и обзор 4.1, используя python и красивый суп, но мне не удалось войти в . Любая подсказка о том, как найти эту категорию карт Google?
я получил этот текст с некоторой ошибкой Javascript, я думаю:
Enable JavaScript to see Google Maps.
Мой код:
import requests
from bs4 import BeautifulSoup
Query = " Restaurant el merendero "
durl= "https://www.google.com/maps/search/?api=1&query=%s" % Query
page = requests.get(durl)
soup = BeautifulSoup(page.content, 'html.parser')
unicode_str = soup.decode("utf8")
encoded_str = unicode_str.encode("ascii",'ignore')
news_soup = BeautifulSoup(encoded_str, "html.parser")
a_text = news_soup.find_all('div')
print(a_text)
Да, это сделано
Ответы 1
Это связано с тем, что карта Google отображается как одностраничное приложение с Angular (я полагаю).
BeautifulSoup не может выполнить Javascript, поэтому вам нужно будет выполнить код Javascript (например: с Селен или Всплеск или любым безголовым браузером), прежде чем он сможет фактически просматривать и сканировать отображаемый HTML.
См. этот репозиторий, в котором содержится пример того, чего вы пытаетесь достичь: https://github.com/registerguard/spa_scraper
Вы можете убедиться в том, что я говорю, отключив Javascript в своем браузере и перейдя на карты Google.
Не могли бы вы опубликовать код, который у вас есть до сих пор