Che c'entra alt con un'immagine visibile?
Forse fai confusione con il title. alt server per sosttuire un'immagine che per vari motivi non viene caricata.
Il title invece si usa tipicamente per i tag <a> (o altri link) per spiegare cosa fa il link.
Si puo` usare in molti tag, sempre per spiegare tramite un tooltip cosa fa (o a cosa serve) l'oggetto in questione.
Non e` quindi una didascalia. Per una didascalia ci sono altri tag; se vuoi farla apparire assieme all'immagine, potresti fare due <div> che contengono ciascuno l'immagine e la didascalia e fare il rollover usando i due <div>.