si, ma lo spider del motore visiterà tutte le pagine del sito a patto che la navigazione dello sito stesso sia corretta (ovvero il menu deve essere testuale e ci deve essere la mappa)

io escludo col robots i file che non servono ai motori tipo i css e le pagine di accesso alle aree riservate o gli .swf ma non significa che non li legge, credo che non li mostri nelle serp e basta