Если нужно массово, то проще всего конвертировать в прозрачный PNG с ffmpeg, затем наложить текст с ImageMagick, а затем конвертировать обратно в WebM.
ffmpeg -i input.webm -an -y frames/%03d.png
https://www.imagemagick.org/Usage/annotating/#wmark_textffmpeg -framerate 60 -f image2 -i frames/%03d.png -c:v libvpx-vp9 -pix_fmt yuva420p output.webm
Замените -framerate 60 на FPS ваших видео.