se lui puo vedere i file che hai sul server e se sono file html,css e immagini, può rubarteli anche senza che abbia accesso alle cartelle.
Cmq se gli hai dato i dati ftp ormai è tardi, dovresti cambiare i dati (che da quanto so aruba è un po p@ll@setta per queste cose) e poi non ti servirebbe a niente.

Esempio
se te hai i file pippo.html, pluto.html, gino.css, roberto.jpg, francesco.gif e sono in una sottodirectory di nome SOTTO

basta che io faccia

www.dominiotuo.it/SOTTO/pippo.html
www.dominiotuo.it/SOTTO/pluto.html
www.dominiotuo.it/SOTTO/gino.css
ecc...

e i file te li rubo lo stesso.

Questa protezione che vuoi te può essere utile solo se hai dei file php o asp