Se i tuoi genitori sono persone in gamba gli dispiacerebbe per la lontananza ma capirebbero le tue esigenze.
Per il resto tu dovresti avere la tua vita e loro la loro, che poche volte si intrecciano.

Quindi se è un problema di genitori (nel senso che non vuoi lasciarli soli), parti pure.

Aggiungo: solitamente i rapporti con i genitori migliorano quando si vedono di meno.