Non sò se può esserti utile visto che utilizzo il tag object e non video, ma io l'ho provato con un flusso rtsp. Funziona su chrome, firefox e IE.

codice:
<html>
<head>
	<title>Prova RTSP</title>
</head>
<body>
	<div>
		<OBJECT classid="clsid:9BE31822-FDAD-461B-AD51-BE1D1C159921" codebase="http://downloads.videolan.org/pub/videolan/vlc/latest/win32/axvlc.cab" width="640" height="480" id="vlc" events="True">
		<param name="Src" value="rtsp://192.168.0.100/trackID=1" />
		<param name="ShowDisplay" value="false" />
		<param name="AutoLoop" value="true" />
		<param name="AutoPlay" value="true" />
		<embed type="application/x-vlc-plugin" name="video1" autoplay="yes" loop="yes" width="640" height="480" target="rtsp://192.168.0.100/trackID=1"></embed>
		</OBJECT>	
	</div>
</body>
</html>
Per IE mi chiede di scaricare l'ActiveX mentre per Chrome e Firefox avevo già il plugin installato quindi non saprei.