Неустранимая ошибка: вызов функции-члена hasAttribute () при значении null

Я изменил некоторые из найденных здесь искателей, и все работало нормально, но у меня есть некоторые проблемы. Первая - это фатальная ошибка: вызов функции-члена hasAttribute () с нулевым значением. Как я могу это обойти? Первая запись всегда генерируется пустой, я тоже не знаю почему. Другое дело, что мой XML перезаписывается после каждой записи вместо добавления дополнительных элементов.

Большое спасибо за помощь!

<?php
ini_set('display_errors', 1);
ini_set('display_startup_errors', 1);
error_reporting(E_ALL);
/*
 * howCode Web Crawler Tutorial Series Source Code
 * Copyright (C) 2016
 *
 * This program is free software: you can redistribute it and/or modify
 * it under the terms of the GNU General Public License as published by
 * the Free Software Foundation, either version 3 of the License, or
 * (at your option) any later version.
 *
 * This program is distributed in the hope that it will be useful,
 * but WITHOUT ANY WARRANTY; without even the implied warranty of
 * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
 * GNU General Public License for more details.
 *
 * You should have received a copy of the GNU General Public License
 * along with this program.  If not, see <http://www.gnu.org/licenses/>.
 *
 * https://howcode.org
 *
*/

// This is our starting point. Change this to whatever URL you want.
$start = "https://www.xxxxx.com/xxx.xml";

// Our 2 global arrays containing our links to be crawled.
$already_crawled = array();
$crawling = array();
function array_to_xml( $data, &$xml_data ) {
    foreach( $data as $key => $value ) {
        if ( is_numeric($key) ){
            $key = 'item'.$key; //dealing with <0/>..<n/> issues
        }
        if ( is_array($value) ) {
            $subnode = $xml_data->addChild($key);
            array_to_xml($value, $subnode);
        } else {
            $xml_data->addChild("$key",htmlspecialchars("$value"));
        }
     }
}
function get_details($url) {

    // The array that we pass to stream_context_create() to modify our User Agent.
    $options = array('http'=>array('method'=>"GET", 'headers'=>"User-Agent: howBot/0.1\n"));
    // Create the stream context.
    $context = stream_context_create($options);
    // Create a new instance of PHP's DOMDocument class.
    $doc = new DOMDocument();

    //var_dump($doc);
    // Use file_get_contents() to download the page, pass the output of file_get_contents()
    // to PHP's DOMDocument class.
    @$doc->loadHTML(@file_get_contents($url, false, $context));

    // Create an array of all of the title tags.
    $title = $doc->getElementsByTagName("h1");
    // There should only be one <title> on each page, so our array should have only 1 element.
    $title = $title->item(0)->nodeValue;

    $data->title = $title;
    // Give $description and $keywords no value initially. We do this to prevent errors.
    $description = "";
    $keywords = "";
    // Create an array of all of the pages <meta> tags. There will probably be lots of these.
    $proddesc = "product-description";
    $finder = new DomXPath($doc);
    $spaners = $finder->query("//*[contains(@class, '$proddesc')]");
    $spaners = $spaners->item(0)->nodeValue;    
    $data->spanner = $spaners;

    $imgdata = "product-big-picture";
    $finder8 = new DomXPath($doc);
    $img = $finder8->query('//*[@class = "product-big-picture"]');
    if ($img->item(0)->hasAttribute('src')){
        $img = $img->item(0)->getAttribute('src');
    }else{
        $img='';
    }
    $data->img = $img;

    var_dump($img);

    $proddescother  = "other-desc";
    $finder2 = new DomXPath($doc);
    $descOther = $finder2->query("//*[contains(@class, '$proddescother')]");
    $descOther = $descOther->item(0)->nodeValue;
    $data->desc = $descOther;

    $eanhtml = "product-info";
    $finder3 = new DomXPath($doc);
    $ean = $finder3->query("//*[contains(@class, '$eanhtml')]");
    $ean = $ean->item(0)->nodeValue;

    //$ShortDesc    = $doc->getElementsByClassName("product-description");
    //var_dump($spaner);
    //$LongDesc     = $doc->getElementsByClassName("other-desc");
    //$ean      = $doc->getElementsByClassName("product-info");
    // Loop through all of the <meta> tags we find.
    /*for ($i = 0; $i < $metas->length; $i++) {
        $meta = $metas->item($i);
        // Get the description and the keywords.
        if (strtolower($meta->getAttribute("name")) == "description")
            $description = $meta->getAttribute("content");
        if (strtolower($meta->getAttribute("name")) == "keywords")
            $keywords = $meta->getAttribute("content");

    }*/
    // Return our JSON string containing the title, description, keywords and URL.
    $eanfinalPiece = explode(':', $ean);
    $eanfinal = $eanfinalPiece[1];
    $data->ean = $eanfinal;

    $product_data = json_encode($data);
    var_dump($product_data);


    //$json = '{ "Title": "'.str_replace("\n", "", $title).'", "Short Desc": "'.str_replace("\n", "", $spaners).'", "Long Desc": "'.str_replace("\n", "", $descOther).'", "EAN": "'.$eanfinal.'"},';
    $array = json_decode($product_data, true);
    //var_dump($json);
    $xml_data = new SimpleXMLElement('<?xml version = "1.0"?><data></data>');
    array_to_xml($data,$xml_data);

    //saving generated xml file; 
    $result .= $xml_data->asXML('data.xml');
    return true;
}

function follow_links($url) {
    // Give our function access to our crawl arrays.
    global $already_crawled;
    //var_dump($already_crawled);
    global $crawling;
    // The array that we pass to stream_context_create() to modify our User Agent.
    $options = array('http'=>array('method'=>"GET", 'headers'=>"User-Agent: howBot/0.1\n"));
    // Create the stream context.
    $context = stream_context_create($options);
    // Create a new instance of PHP's DOMDocument class.
    $doc = new DOMDocument();
    // Use file_get_contents() to download the page, pass the output of file_get_contents()
    // to PHP's DOMDocument class.
    @$doc->loadHTML(@file_get_contents($url, false, $context));
    // Create an array of all of the links we find on the page.
    $linklist = $doc->getElementsByTagName("loc");
    //var_dump($linklist);
    // Loop through all of the links we find.
    foreach ($linklist as $link) {
        $l =  $link->textContent;
        //var_dump($link->textContent);
        // Process all of the links we find. This is covered in part 2 and part 3 of the video series.
        if (substr($l, 0, 1) == "/" && substr($l, 0, 2) != "//") {
            $l = parse_url($url)["scheme"]."://".parse_url($url)["host"].$l;
        } else if (substr($l, 0, 2) == "//") {
            $l = parse_url($url)["scheme"].":".$l;
        } else if (substr($l, 0, 2) == "./") {
            $l = parse_url($url)["scheme"]."://".parse_url($url)["host"].dirname(parse_url($url)["path"]).substr($l, 1);
        } else if (substr($l, 0, 1) == "#") {
            $l = parse_url($url)["scheme"]."://".parse_url($url)["host"].parse_url($url)["path"].$l;
        } else if (substr($l, 0, 3) == "../") {
            $l = parse_url($url)["scheme"]."://".parse_url($url)["host"]."/".$l;
        } else if (substr($l, 0, 11) == "javascript:") {
            continue;
        } else if (substr($l, 0, 5) != "https" && substr($l, 0, 4) != "http") {
            $l = parse_url($url)["scheme"]."://".parse_url($url)["host"]."/".$l;
        }
        // If the link isn't already in our crawl array add it, otherwise ignore it.
        if (!in_array($l, $already_crawled)) {
                $already_crawled[] = $l;
                $crawling[] = $l;
                // Output the page title, descriptions, keywords and URL. This output is
                // piped off to an external file using the command line.
                echo get_details($l)."\n";
        }

    }
    // Remove an item from the array after we have crawled it.
    // This prevents infinitely crawling the same page.
    array_shift($crawling);
    // Follow each link in the crawling array.
    foreach ($crawling as $site) {
        follow_links($site);
    }

}
// Begin the crawling process by crawling the starting link first.
follow_links($start);
Стоит ли изучать PHP в 2026-2027 годах?
Стоит ли изучать PHP в 2026-2027 годах?
Привет всем, сегодня я хочу высказать свои соображения по поводу вопроса, который я уже много раз получал в своем сообществе: "Стоит ли изучать PHP в...
Symfony Station Communiqué - 7 июля 2023 г
Symfony Station Communiqué - 7 июля 2023 г
Это коммюнике первоначально появилось на Symfony Station .
Оживление вашего приложения Laravel: Понимание режима обслуживания
Оживление вашего приложения Laravel: Понимание режима обслуживания
Здравствуйте, разработчики! В сегодняшней статье мы рассмотрим важный аспект управления приложениями, который часто упускается из виду в суете...
Установка и настройка Nginx и PHP на Ubuntu-сервере
Установка и настройка Nginx и PHP на Ubuntu-сервере
В этот раз я сделаю руководство по установке и настройке nginx и php на Ubuntu OS.
Коллекции в Laravel более простым способом
Коллекции в Laravel более простым способом
Привет, читатели, сегодня мы узнаем о коллекциях. В Laravel коллекции - это способ манипулировать массивами и играть с массивами данных. Благодаря...
Как установить PHP на Mac
Как установить PHP на Mac
PHP - это популярный язык программирования, который используется для разработки веб-приложений. Если вы используете Mac и хотите разрабатывать...
1
0
788
1
Перейти к ответу Данный вопрос помечен как решенный

Ответы 1

Ответ принят как подходящий

Попробуйте заменить

if ($img->item(0)->hasAttribute('src')){

с участием

if ($img->item(0) && $img->item(0)->hasAttribute('src')){

Спасибо, теперь у меня нет этой ошибки, но $img = $img->item(0)->getAttribute('src'); не работает :( У меня есть элемент <img>, подобный этому <img class = "cover product-big-picture" itemprop = "image" data-missing = "/brak.png" onerror = "this.src=this.dataset.missing;" src = "https:/xxxxx/5905187114838.jpg" alt = "Chipsy Crunchips x-cut ser i cebula ">

Jakub Jóźwiak 24.04.2018 12:38

Просто потому, что "ser i cebula" - не очень хорошее сочетание;) Как это не работает? Вы уверены, что ваш xpath правильный и вы получаете нужные вам изображения?

bigwolk 24.04.2018 12:45

Ха-ха!: 0 Как я могу проверить свой xpath? Я не знаю :(

Jakub Jóźwiak 24.04.2018 12:54

У вас есть несколько программ проверки xpath в качестве расширений для браузера, которые помогут вам проверить это на своей странице. Просто используйте Google и свои руки.

bigwolk 24.04.2018 13:00

Другие вопросы по теме