Prova ad aggiungere al class per il tag a display:block;
Se ho capito bene a te interessa che il tag a a cui dai width e height cambi il colore di sondo riempiendo il div.
Quindi il div deve avere le stesse dimensioni.

Premesso che come ti hanno detto sopra dovresti usare una lista. E anche i frame sarebbe preferibile non usarli.