Non conosco bene KDE, ma prova a lanciare kcontrolcenter (da console o con Alt+F2), ci dovrebbe essere una sezione tipo "pannelli". Da lì dovresti poter sistemare tutto