Devi usare un modem/router ethernet, che abbia lo switch integrato (altrimenti lo devi prendere a parte) in modo da poter collegare più pc insieme. Poi per portare la linea nell'altra stanza dovrai cablare con un cavo ethernet.
Non so se con alice ti danno la possibilità di avere un mosem/router, informati. Io cmq il router lo comprerei senza prenderlo in comodato, ormai trovi dei buoni prezzi e 3 euro al mese non sono pochi, anche se è vero che in caso di guasti te lo sostituiscono gratis.
Per la banda non ti preoccupare, va più che bene per due pc.
Ciao