Как очистить элементы этого сайта с помощью красивого супа?

Привет, я пытаюсь очистить все продукты на этом сайте. https://segari.id/

Однако URL-адрес статичен, и суп, когда я пытался очистить его, не работает на этом сайте. Даже если это так, как мне бесконечно прокручивать вниз, чтобы получить предметы? Каков рекомендуемый способ очистки всех предметов?

Вот мой текущий код:

#user agent

from fake_useragent import UserAgent
import requests
from bs4 import BeautifulSoup
import pandas as pd
from datetime import datetime

def userAgent(URL):
    dateNow = datetime.date(datetime.now())
    ua = UserAgent()
    USER_AGENT = ua.random
    headers = {"User-Agent" : str(USER_AGENT),"Accept-Encoding": "*","Connection": "keep-alive"}
    print(USER_AGENT)
    resp = requests.get(URL, headers=headers)
    soup = BeautifulSoup(resp.content, "html.parser")
    if resp.status_code != 200:
        print(f'error 200:{URL}')
        urlError = pd.DataFrame({'url':[URL],
                                'date':[dateNow] 
                                })
        responseCode=500
        urlError.to_csv('errorUrl/errorUrl.csv', mode='a', index=False, header=False)
    elif resp.status_code == 200:
        responseCode=200
    return soup,responseCode

#scraping component
URL = https://segari.id/
soup = userAgent(URL)
title = soup.find_all('div', {"class":"ProductCard_productName__1fPfF"})
listTitle=[]
for t in title:
    listTitle.append(t)
list = pd.DataFrame(listTitle)