Un po' difficile capire cosa ti serve senza dare uno sguardo ad un minimo di codice.
In generale penso che tu possa risolvere così:
Do per scontato che tu stia creando i vari td tramite un echo nel ciclo while. Supponiamo che il campo (valorizzato o no) si chiami $pippo:
codice HTML:
echo '<td';
if($pippo) {echo ' alt="', $pippo, '"';} // Gli da l'etichetta solo se $pippo è valorizzato
echo '>Contenuto del td</td>';
E' questo che intendevi?