if Key = 'A' then
begin
Key := #0;
end;

Prova ad inserire questo comando sull'evento OnKeyPress dell'oggetto Edit.
Questo ti bloccherà l'inserimento del carattere 'A'.
Non sò se ci siamo metodi migliori,può darsi di si, ma se per ogni lettera che non ti interessa immettere usassi questo comando, risolveresti il tuo problema.