Очистка элемента из сети с помощью rvest

Я пытаюсь спарсить элемент с сайта: https://diga.bfarm.de/de/verzeichnis

моя цель — создать таблицу из всех class="entity-app"

library (rvest)
document <- read_html("https://diga.bfarm.de/de/verzeichnis")
html_products <- document %>% html_elements("entity-app")

моя цель – добиться следующего результата

сущность-app__header__name сущность-app__info__list__header Первый ряд Второй ряд

Если бы у кого-то была идея или ход мыслей, это было бы очень хорошо.

Большое спасибо, дорогие будущие участники. ;)

rvest здесь не тот инструмент. Я щелкнул ссылку, и похоже, что содержимое динамически загружается с помощью JavaScript. document <- read_html("https://diga.bfarm.de/de/verzeichnis") возвращает сообщение об ошибке на немецком языке, которое переводится как «Эта страница требует JavaScript». Пожалуйста, включите JavaScript в настройках вашего браузера. Вам следует рассмотреть возможность использования безголового браузера, например. через RSelenium .

— 06.05.2024 14:35

rvest имеет экспериментальную функцию read_html_live(), которая может очищать веб-страницы, динамически генерирующие JavaScript. Попробуйте read_html_live("https://diga.bfarm.de/de/verzeichnis") |> html_elements(".entity-app__header__name") |> html_text2(), например.

— 06.05.2024 16:16

r web-scraping rvest

06.05.2024 14:29

Стоит ли изучать PHP в 2023-2024 годах?

Привет всем, сегодня я хочу высказать свои соображения по поводу вопроса, который я уже много раз получал в своем сообществе: "Стоит ли изучать PHP в...

Поведение ключевого слова "this" в стрелочной функции в сравнении с нормальной функцией

В JavaScript одним из самых запутанных понятий является поведение ключевого слова "this" в стрелочной и обычной функциях.

Приемы CSS-макетирования - floats и Flexbox

Здравствуйте, друзья-студенты! Готовы совершенствовать свои навыки веб-дизайна? Сегодня в нашем путешествии мы рассмотрим приемы CSS-верстки - в...

Тестирование функциональных ngrx-эффектов в Angular 16 с помощью Jest

В системе управления состояниями ngrx, совместимой с Angular 16, появились функциональные эффекты. Это здорово и делает код определенно легче для...

Концепция локализации и ее применение в приложениях React ⚡️

Локализация - это процесс адаптации приложения к различным языкам и культурным требованиям. Это позволяет пользователям получить опыт, соответствующий...

Пользовательский скаляр GraphQL

Листовые узлы системы типов GraphQL называются скалярами. Достигнув скалярного типа, невозможно спуститься дальше по иерархии типов. Скалярный тип...

Перейти к ответу Данный вопрос помечен как решенный

Ответы 1

Ответ принят как подходящий

Это сработало для меня, если это поможет (используя rvest read_html_live и помещая результаты в фрейм данных с двумя столбцами):

library(tibble)
library(rvest)

sess <- 
  read_html_live("https://diga.bfarm.de/de/verzeichnis") 

Sys.sleep(5)

tibble(
  header = sess |>
    html_elements(".entity-app__header__name") |>
    html_text2(),
  info = sess |>
    html_elements(".entity-app__subheader") |>
    html_text2()
)
#> # A tibble: 57 × 2
#>    header                                                             info      
#>    <chr>                                                              <chr>     
#>  1 actensio                                                           Vorläufig…
#>  2 Cara Care für Reizdarm                                             Dauerhaft…
#>  3 companion patella powered by medi - proved by Dt. Kniegesellschaft Dauerhaft…
#>  4 deprexis                                                           Dauerhaft…
#>  5 edupression.com®                                                   Dauerhaft…
#>  6 elevida                                                            Dauerhaft…
#>  7 elona therapy Depression                                           Vorläufig…
#>  8 Endo-App                                                           Dauerhaft…
#>  9 glucura Diabetestherapie                                           Vorläufig…
#> 10 HelloBetter Chronische Schmerzen                                   Dauerhaft…
#> # ℹ 47 more rows

^{Created on 2024-05-06 with reprex v2.1.0}

я получил следующую ошибку: «Ошибка в new_chromote && !self$session$is_active(): неверный тип 'x» в 'x && y'

— 06.05.2024 22:03

У вас установлен пакет chromote? А на вашем компьютере установлена копия Google Chrome?

— 06.05.2024 22:11

Как описано здесь.

— 06.05.2024 22:19

06.05.2024 17:38