Не удается загрузить содержимое iframe с помощью Python

Мне нужно очистить содержимое iframe с помощью python.

Когда веб-страница загружается, она отправляет запрос и получает в ответ содержимое iframe. Когда я использую BeautifulSoup для получения данных, он просто дает начальное пустое содержимое iframe.

Есть ли способ получить содержимое? Если да, то как мне это сделать в моем случае?

Вот мой код:

import requests
from bs4 import BeautifulSoup

page = requests.get("https://etherscan.io/token/0x168296bb09e24a88805cb9c33356536b980d3fc5#balances" + "/token/generic-tokenholders2?a=0x168296bb09e24a88805cb9c33356536b980d3fc5&amp;s=100000000000000000", headers = {"content-type":"type"}, timeout=5)
soup = BeautifulSoup(page.content, "html.parser")

balances = soup.find(id = "balances")
print(balances.prettify()) 
table_items = balances.find_all('tr') #I'm trying to collect all the <tr> tags inside an <iframe>
print(table_items) #It shows an empty list because the <iframe> didn't load

python python-3.x iframe web-scraping beautifulsoup

24.04.2018 18:08

Почему в Python есть оператор "pass"?

Оператор pass в Python - это простая концепция, которую могут быстро освоить даже новички без опыта программирования.

Некоторые методы, о которых вы не знали, что они существуют в Python

Python - самый известный и самый простой в изучении язык в наши дни. Имея широкий спектр применения в области машинного обучения, Data Science,...

Основы Python Часть I

Вы когда-нибудь задумывались, почему в программах на Python вы видите приведенный ниже код?

LeetCode - 1579. Удаление максимального числа ребер для сохранения полной проходимости графа

Алиса и Боб имеют неориентированный граф из n узлов и трех типов ребер:

Оптимизация кода с помощью тернарного оператора Python

И последнее, что мы хотели бы показать вам, прежде чем двигаться дальше, это

Советы по эффективной веб-разработке с помощью Python

Как веб-разработчик, Python может стать мощным инструментом для создания эффективных и масштабируемых веб-приложений.

1 447

Ответы 1

Вы должны переключиться на iframe, чтобы получать из него контент. Найдите iframe и сделайте новый запрос.

iframe_content = requests.get(soup.find("iframe_name")["src"])

см. вопрос это

Что вы добавляете в "src"? Я попытался вставить ссылку из src iframe, но она не работает

— 26.04.2018 05:25

Src - это iframes attribute that specifies the url of the document to embed in the iframe. I didnt visit your url. The src is empty because they use javascript to set it. You can, получить его с помощью bs4. Одно из возможных решений - использовать селен.

— 26.04.2018 13:52

24.04.2018 18:23