Vai nel tab "hierarchy" (l'icona è un cubo collegato ad altri tre piccoli cubi), clic su Pivot -> affect pivot only. A questo punto puoi muovere/ruotare il tuo pivot.