Si è possibile, ma non funziona su tutti i browsers il css è qualcosa del genere:

SCROLLBAR-FACE-COLOR: #666666;
SCROLLBAR-SHADOW-COLOR: #666666;
SCROLLBAR-ARROW-COLOR: #FFFFFF;
SCROLLBAR-BASE-COLOR: #666666;
scrollbar-3dlight-color: #666666;
scrollbar-darkshadow-color: #666666;}