Ciao, non credo che questa sia la sezione adatta per il problema. In ogni caso, il player di youtube imposta automaticamente la qualità del video in base alla tua velocità di connessione. E' possibile che visualizzi il video ad esempio a 360p automaticamente la qualità aumenta a 720 e il buffer riparte dal punto in cui sei arrivato. Quindi non credo che il problema sia legato all' html.
In ogni caso prova ad impostare fin da subito la qualità massima e lasci in pausa per qualche secondo il video, il tempo che si carica un po' il buffer e poi play..