Добавление фрейма данных внутри цикла

Я пытаюсь получить список ссылок, перебирая элементы, а затем щелкая по страницам. Я не уверен, как добавить каждый цикл в фрейм данных pandas после того, как он пройдет разбиение на страницы, показанное ниже, поэтому я могу вызвать фрейм данных вне цикла, чтобы перечислить все ссылки.

Он всегда перезаписывает и распечатывает последнюю строку.

while True:

    links = [link.get_attribute('href') for link in driver.find_elements_by_class_name('view-detail-link')]

    for link in links:

        df_links = pd.DataFrame([[link]], columns=['link'])

    try:

        NextPage = driver.find_element_by_xpath('//a[@class = "ui-pagination-next ui-goto-page"]')
        driver.execute_script("arguments[0].click();", NextPage)

        time.sleep(3)

    except NoSuchElementException:
        break

print(df_links.link[0])

Этого следует избегать См. это решение Добавление фреймов данных в список, объединение одного в конце цикла

— 16.03.2019 00:54

python pandas selenium

15.03.2019 23:28

Почему в Python есть оператор "pass"?

Оператор pass в Python - это простая концепция, которую могут быстро освоить даже новички без опыта программирования.

Некоторые методы, о которых вы не знали, что они существуют в Python

Python - самый известный и самый простой в изучении язык в наши дни. Имея широкий спектр применения в области машинного обучения, Data Science,...

Основы Python Часть I

Вы когда-нибудь задумывались, почему в программах на Python вы видите приведенный ниже код?

LeetCode - 1579. Удаление максимального числа ребер для сохранения полной проходимости графа

Алиса и Боб имеют неориентированный граф из n узлов и трех типов ребер:

Оптимизация кода с помощью тернарного оператора Python

И последнее, что мы хотели бы показать вам, прежде чем двигаться дальше, это

Советы по эффективной веб-разработке с помощью Python

Как веб-разработчик, Python может стать мощным инструментом для создания эффективных и масштабируемых веб-приложений.

153

Перейти к ответу Данный вопрос помечен как решенный

Ответы 1

Ответ принят как подходящий

Вам нужно создать свой DataFrame вне цикла. Затем каждый раз, когда вы создаете новый DataFrame в цикле, вы добавляете его к основному:

df = pd.DataFrame()

while True:

    links = [link.get_attribute('href') for link in driver.find_elements_by_class_name('view-detail-link')]

    for link in links:

        df_links = pd.DataFrame([[link]], columns=['link'])
        df = df.append(df_links)

    try:

        NextPage = driver.find_element_by_xpath('//a[@class = "ui-pagination-next ui-goto-page"]')
        driver.execute_script("arguments[0].click();", NextPage)

        time.sleep(3)

    except NoSuchElementException:
        break

print(df.link[0])

Тоби, дайте мне знать, если вы можете ответить и на этот вопрос: [stackoverflow.com/questions/55192162/…

— 16.03.2019 01:10

15.03.2019 23:35