ma anche i browser sono tanti
non c'è negli user-agent dei robot una stringa che li identifica come robot?