@Paradox Я заметил такое поведение. При запуске процесса скачивания yt-dlp начинает брать фрагменты только с какого-то одного сервера. Но он может быть недоступен (чаще всего rr*---sn-*.googlevideo.com), из-за чего скачивание останавливается. После перезапуска yt-dlp подключается уже к другому серверу. Скачивание аудио также начинается с другого сервера.
Похожее поведение есть и при обычном просмотре, мне часто помогало обновление страницы.