beccati questo:

<body STYLE="scrollbar-base-color: #000066;
scrollbar-face-color: #FF9900;
scrollbar-arrow-color: #000066;
scrollbar-3dlight-color: blue;
scrollbar-highlight-color: #000066;
scrollbar-shadow-color: #000066;
scrollbar-darkshadow-color: #000066"

mettilo nel tag body, poi ci metti tutto il resto e lo chiudi.
I colori dolo il # sono chiaramente customizzabili.
:metallica