Fammi capire bene, tu hai un modem con più di una porta ethernet ad una c'è collegato un access point ed ad un'altra un PC?
La porta dell'access point funziona a 100 Mbps e l'altra no?
Hai provato a scambiare tra loro le due porte?
I tempi di latenza lunga su Internet comunque non si spiegano con un'eventuale funzionamento a 10 Mbps anzichè a 100 Mbps.