Как отключить отображение на блокировку в Scrapy?

Я пытаюсь очистить данные из раскрывающегося меню (вот ссылка на сайт). Во время проверки, чтобы получить xpath, я понял, что дисплея нет. Итак, есть ли способ очистить данные из этого раскрывающегося меню (подходит для следующих автомобилей), для которого на дисплее установлено значение none. Если да / нет, то как / почему?

Почему в Python есть оператор "pass"?
Почему в Python есть оператор "pass"?
Оператор pass в Python - это простая концепция, которую могут быстро освоить даже новички без опыта программирования.
Некоторые методы, о которых вы не знали, что они существуют в Python
Некоторые методы, о которых вы не знали, что они существуют в Python
Python - самый известный и самый простой в изучении язык в наши дни. Имея широкий спектр применения в области машинного обучения, Data Science,...
Основы Python Часть I
Основы Python Часть I
Вы когда-нибудь задумывались, почему в программах на Python вы видите приведенный ниже код?
LeetCode - 1579. Удаление максимального числа ребер для сохранения полной проходимости графа
LeetCode - 1579. Удаление максимального числа ребер для сохранения полной проходимости графа
Алиса и Боб имеют неориентированный граф из n узлов и трех типов ребер:
Оптимизация кода с помощью тернарного оператора Python
Оптимизация кода с помощью тернарного оператора Python
И последнее, что мы хотели бы показать вам, прежде чем двигаться дальше, это
Советы по эффективной веб-разработке с помощью Python
Советы по эффективной веб-разработке с помощью Python
Как веб-разработчик, Python может стать мощным инструментом для создания эффективных и масштабируемых веб-приложений.
2
0
227
1

Ответы 1

Данные, которые вы хотите очистить, заполняются через вызов Ajax. Итак, вам нужно узнать URL-адрес вызова Ajax. Как только вы это поймете, ваша работа станет легкой.

Следуйте инструкциям ниже.

  1. Откройте Chrome
  2. Открыть ссылку
  3. Открыть консоль разработчиков
  4. Перейти на вкладку сети
  5. Теперь нажмите «Подходит для следующих автомобилей».
  6. Во вкладке сети посмотрите, что происходит звонок

В вашем случае это почтовый запрос, который выполняется «на лету».

Вот фото звонка

Следовательно, вам нужно найти URL-адрес и параметры запроса, переданные во время запроса.

Вы можете видеть, что параметры запроса следующие:

  1. catentryId: 31426
  2. techDocId: 33503

Теперь у вас есть URL-адрес и данные, это всего лишь вопрос нескольких строк кода.

Спасибо. Но как это может быть связано с несколькими строками кода? Не могли бы вы добавить несколько строк кода в свой ответ для большего понимания. Как передать параметры запроса, чтобы получить ссылку?

Danyal Mughal 21.04.2018 14:52

Не могли бы вы добавить пример кода? Я много искал, как реализовать эту информацию, и ничего не получил, кроме головной боли.

Danyal Mughal 24.04.2018 20:26

Другие вопросы по теме