Non credo si danneggi nulla, al massimo si logora la molla del reparto batterie, ma non mi pare nulla di terribile.
Al posto tuo aprirei il mouse e aggiungerei un piccolo interruttore alle batterie... ti basta un saldatore, un taglierino (ma sarebbe meglio un Dremel) e un po' di colla...