Python: поиск XPATH внутри узла
У меня есть html-код, который выглядит примерно так (сокращенно);
<div id = "activities" class = "ListItems">
<h2>Standards</h2>
<ul>
<li>
<a class = "Title" href = "http://www.google.com" >Guidelines on management</a>
<div class = "Info">
<p>
text
</p>
<p class = "Date">Status: Under development</p>
</div>
</li>
</ul>
</div>
<div class = "DocList">
<h3>Reports</h3>
<p class = "SupLink">+ <a href = "http://www.google.com/test" >View More</a></p>
<ul>
<li class = "pdf">
<a class = "Title" href = "document.pdf" target = "_blank" >Document</a>
<span class = "Size">
[1,542.3KB]
</span>
<div class = "Info">
<p>
text <a href = "http://www.google.com" >Read more</a>
</p>
<p class = "Date">
14/03/2018
</p>
</div>
</li>
</ul>
</div>
Я пытаюсь выбрать значение в 'href =' под 'a class = "Title"' с помощью этого кода:
def sub_path02(url):
page = requests.get(url)
tree = html.fromstring(page.content)
url2 = []
for node in tree.xpath('//a[@class = "Title"]'):
url2.append(node.get("href"))
return url2
Но я получаю два результата, также возвращается тот, который находится под 'div class = "DocList".
Я пытаюсь изменить свои выражения xpath, чтобы я смотрел только внутри узла, но не могу заставить его работать.
Может ли кто-нибудь помочь мне понять, как «искать» в определенном узле. Я просмотрел несколько документов xpath, но, похоже, не могу этого понять.
Ответы 2
Попробуйте это выражение xpath, чтобы рекурсивно выбрать div с конкретным id:
'//div[@id = "activities"]//a[@class = "Title"]'
так :
def sub_path02(url):
page = requests.get(url)
tree = html.fromstring(page.content)
url2 = []
for node in tree.xpath('//div[@id = "activities"]//a[@class = "Title"]'):
url2.append(node.get("href"))
return url2
Примечание :
Лучше выбрать я бы, чем класс, потому что я бы должен быть уникальным (в реальной жизни иногда бывает плохой код с несколькими одинаковыми я бы на одной странице, но класс может повторяться N раз)
Используя //, вы уже выбираете все элементы a в документе.
Для поиска в конкретном div попробуйте указать родителя с помощью //, а затем снова используйте // a, чтобы искать в любом месте div.
//div[@class = "ListItems"]//a[@class = "Title"]
for node in tree.xpath('//div[@class = "ListItems"]//a[@class = "Title"]'):url2.append(node.get("href"))
@ user2873939 - рад, что помог. Когда я был разработчиком, мне помогали люди из Stack Overflow. Сейчас я просто пытаюсь помочь людям вернуться. Не могли бы вы проголосовать за мой пост и / или отметить его как ответ?
Большое спасибо, Тед, удивительно, какие быстрые и точные ответы вы можете получить на StackOverflow