Si: potrebbe essere sporca la ventola.
Ma quale fa rumore: quella del processore o quella esterna?
Se è quella esterna non è facile pulirla, se è quella interna potrebbe essere il processore troppo caldo, così la ventola aumenta i giri.
A PC spento puoi Pulire con una spazzola (delicatamente) entrambe le ventole.