UNION ALL MYSQL очень медленный

UNION по умолчанию имеет значение UNION DISTINCT. Если вы хотите использовать UNION ALL, прямо скажите это (и вы должны это делать везде, где это возможно, поскольку UNION DISTINCT должен проделать большую работу, чтобы сделать их разными).

Другое дело, что порядок и ограничение применяются к запросу в целом. Возможно, вы захотите, чтобы каждый объединенный запрос также имел их. См. https://dev.mysql.com/doc/refman/8.0/en/union.html:

ORDER BY и LIMIT в союзах

Чтобы применить предложение ORDER BY или LIMIT к отдельному SELECT, заключите SELECT в скобки и поместите предложение в круглые скобки:

(SELECT a FROM t1 WHERE a=10 AND B=1 ORDER BY a LIMIT 10)
UNION
(SELECT a FROM t2 WHERE a=11 AND B=2 ORDER BY a LIMIT 10);

Если они были в ваших быстрых отдельных версиях, это должно помочь. Что-то вроде этого:

(SELECT p.user_id, p.description, p.post_id, p.created_at, ps.username AS size_name, ps.username AS user_name, ps.avatar AS avatar, pz.title AS title, pz.slug AS slug 
FROM comments p 
JOIN users ps ON ps.id = p.user_id 
JOIN posts pz ON pz.id = p.post_id 
order by created_at DESC 
LIMIT 10)

UNION ALL

(SELECT p2.user_id, p2.description, p2.post_id, p2.created_at, ps2.username AS size_name, ps2.username AS user_name, ps2.avatar AS avatar, pz2.title AS title, pz2.slug AS slug 
FROM reply p2 
JOIN users ps2 ON ps2.id = p2.user_id 
JOIN posts pz2 ON pz2.id = p2.post_id 
order by created_at DESC 
LIMIT 10)

order by created_at DESC 
LIMIT 10

Перед слиянием с помощью UNION уменьшите размер таблиц, возвращаемых каждым подзапросом. Поскольку вам нужны только первые 10, вам нужны только первые 10 каждого подзапроса.

SELECT *
FROM (
    (SELECT p.user_id, p.description, p.post_id, p.created_at, ps.username AS size_name, ps.username AS user_name, ps.avatar AS avatar, pz.title AS title, pz.slug AS slug 
    FROM comments p 
    JOIN users ps ON ps.id = p.user_id 
    JOIN posts pz ON pz.id = p.post_id 
    ORDER BY created_at DESC
    LIMIT 10) 
    
    UNION ALL
    
    (
    SELECT p2.user_id, p2.description, p2.post_id, p2.created_at, ps2.username AS size_name, ps2.username AS user_name, ps2.avatar AS avatar, pz2.title AS title, pz2.slug AS slug 
    FROM reply p2 
    JOIN users ps2 ON ps2.id = p2.user_id 
    JOIN posts pz2 ON pz2.id = p2.post_id 
    ORDER BY created_at DESC
    LIMIT 10)
) AS x
order by created_at DESC 
LIMIT 10