Per aggiungere altri formati ti basta aggiungere il formato nel tag <video> e nella playlist. Io però trasformerei gli altri formati in mp4 per essere sicuro che quasi tutti i browser lo leggono.

Per le immagini il metodo più breve e sicuro è farme un video mp4 con i tempi che vuoi per ogni immagine