Я пытаюсь очистить статьи с нескольких страниц из https://edm.com/новости, используя Selenium с chromedriver, и столкнулся с несколькими ошибками при попытке нажать кнопку «Подробнее». Любые идеи о том, что я могу попробовать?
Я пробовал работать с ActionChains.move_to_element(..).click.perform() также пробовал несколько вызовов time.sleep или WebDriverWait.until... похоже, ничего не помогает.
start_url = "https://edm.com/news"
browser = webdriver.Chrome(executable_path='chromedriver.exe', options=self.option)
browser.get(self.start_url)
# Wait max 10 secs for page to load
timeout = 10
WebDriverWait(browser, timeout).until(EC.visibility_of_element_located((By.XPATH,'//*[@id = "lyra-wrapper"]/div/div[3]/section/'
'div[2]/section[2]/section/div/button')))
time.sleep(2)
button = browser.find_elements(By.XPATH, '//*[@id = "lyra-wrapper"]/div/div[3]/section/'
'div[2]/section[2]/section/div/button')[0]
button.click()
File "C:\Program Files (x86)\Python37-32\lib\site-packages\selenium\webdriver\remote\webelement.py", line 80, in click
self._execute(Command.CLICK_ELEMENT)
File "C:\Program Files (x86)\Python37-32\lib\site-packages\selenium\webdriver\remote\webelement.py", line 633, in _execute
return self._parent.execute(command, params)
File "C:\Program Files (x86)\Python37-32\lib\site-packages\selenium\webdriver\remote\webdriver.py", line 321, in execute
self.error_handler.check_response(response)
File "C:\Program Files (x86)\Python37-32\lib\site-packages\selenium\webdriver\remote\errorhandler.py", line 242, in check_response
raise exception_class(message, screen, stacktrace)
selenium.common.exceptions.WebDriverException: Message: unknown error: Element is not clickable at point (508, 4270)
(Session info: chrome=74.0.3729.169)
(Driver info: chromedriver=2.42.591088 (7b2b2dca23cca0862f674758c9a3933e685c27d5),platform=Windows NT 10.0.17763 x86_64)```
<button class = "m-component-footer--loader m-button" onclick = "return phoenixTrackClickEvent(this, event);" phx-track-id = "load more">
<div class = "m-component-footer--text m-component-footer--loading">Loading…</div>
<div class = "m-component-footer--text m-component-footer--button-text">See More</div>
</button>
Если вы внимательно посмотрите, в теге кнопки есть 2 div. Поэтому вам нужно использовать xpath для See More div, который называется //*[@id = "lyra-wrapper"]/div/div[3]/section/div[2]/section[2]/section/div/button/div[2]
. Затем используйте для него click().
попробуйте найти элемент по тексту "See More"
start_url = "https://edm.com/news"
browser = webdriver.Chrome('C:/chromedriver_win32/chromedriver.exe')
browser.get(start_url)
# Wait max 10 secs for page to load
wait = WebDriverWait(browser, 10)
time.sleep(2)
close_advert = wait.until(EC.element_to_be_clickable((By.XPATH, '//*[@id = "lyra-wrapper"]/div/div[4]/phoenix-ad[2]/div/div[2]')))
close_advert.click()
see_more = wait.until(EC.element_to_be_clickable((By.XPATH, '//button[contains(.,"See More")]')))
time.sleep(2)
try:
see_more.click()
except:
time.sleep(3)
see_more.click()
Привет, @chitown88, во-первых, я очень ценю быстрый ответ, так что заранее спасибо за это. К сожалению, я все еще работаю с той же ошибкой «Элемент не доступен для клика в ...» после внесения рекомендованных вами изменений.
странный. это работает на моем конце. возможно, нужно поставить временную задержку там. я объявлю это выше
о вы знаете что. есть всплывающее окно, которое блокирует его, поэтому в нем говорится, что нет элемента, который можно щелкнуть. Вам нужно, чтобы селен закрывал рекламу, которая появляется, когда она появляется
Что ж, у нас есть прогресс! Теперь мне удалось нажать его несколько раз, а затем получить еще одну ошибку (другой элемент получит щелчок, элемент недоступен в (x, y)), но я думаю, что смогу исправить это с некоторой задержкой. Не могу поверить, что это были всплывающие куки .... Спасибо за вашу помощь, мой друг!
я. по какой-то причине он не распознавал его, пока не прокрутил вниз. Так что это своего рода "взлом" решение, но теперь оно работает для меня.
Отлично работает и у меня! Вопрос новичка, так как я работаю над Xpath и Web Scraping всего 2 месяца. относится к тексту? Разве он не должен содержать (текст(), строка)?
хороший вопрос. Я все еще изучаю материал xpath. Есть подробное объяснение здесь, которое я тоже все еще пытаюсь понять
@dzz, если решение было то, что вам нужно, обязательно примите решение выше, нажав «Проверить».
Привет, Саураб, спасибо за быстрый ответ, ценю это! Проблема в том, что он обнаруживает div/кнопку «Подробнее» и все равно заканчивается ошибкой «не кликабельно в (x, y)». На самом деле не могу понять, почему это происходит.