Поиск на байдарках / Алгоритм сбора данных
Работа над проектом, который будет включать аналогичный алгоритм поиска, чтобы найти «самую низкую цену» определенного товара.
Я много думал об этом типе алгоритма и о том, как его можно реализовать. Сначала я подумал, что это просто интернет-поиск.
Однако это кажется маловероятным. Я думаю, что сканирование займет слишком много времени, а также вызовет больше проблем для веб-сайтов, требующих взаимодействия с их API.
Как я могу реализовать этот тип алгоритма? Я думал объединить контент в базу данных, а затем просто запустить проверку обновлений в базе данных, чтобы проверить, изменились ли какие-либо цены? Будет ли это хороший способ сделать это?
это предполагает поиск учебников. Так что я бы представил, что буду искать как минимум на 10-20 веб-сайтах, это будет по одному учебнику за раз, а не по нескольким учебникам одновременно.
Если вы имеете в виду определенные веб-сайты, то используйте webscrape. Ваше предложение базы данных просто затушевывает проблему получения цен - как вы заполняете свою базу данных. Если у вас нет конкретных веб-сайтов, используйте API для покупок и позвольте им делать всю тяжелую работу.
Боюсь, нам понадобится гораздо больше деталей, чтобы продолжить. Сколько товаров вы хотите узнать по цене, или это только один? Сможете ли вы найти достаточно мест, чтобы найти этот продукт в Интернете и почистить его? Я полагаю, это не займет так много времени. Очевидно, вы не можете искать везде?