Eliminare contenuto e cartella, ma non cartella principale

[ANTAGONIA]

Buon giorno a tutti.
Ho una cartella principale delle immagini "images".
All'interno vengo create dinamicamente, "sotto cartella" e poi viene caricata l'immagine.
Al contempo ho una funzione che mi elimina immagine e sottocartella.
Ma purtroppo essendo ricorsiva, se all'interno della cartella principale "images", non trova più nulla, elimina anche questa.

function recursiveRemove($dir) {
$structure = glob(rtrim($dir, "/").'/*');
if (is_array($structure)) {
foreach($structure as $file) {
if (is_dir($file)) recursiveRemove($file);
elseif (is_file($file)) unlink($file);
}
}
rmdir($dir);
} 

Come posso, EVITARE di eliminare la cartella "images"?
Grazie.