è normalissimo, assolutamente normale.
in teoria le due bande sarebbero separate, però quando effettui un download, consumi un pochino di banda in upload, per confermare la ricezione del pacchetto dati, e per richiedere quello successivo.
il consumo è nell'ordine di 1-2k/s a seconda della velocità in download, se i download sono uno o più....
quindi se stai uppando al massimo, il pc farà più fatica a fare il procedimento descritto sopra, ecco che quindi il download diminuisce