Esistono siti che indicano i link al tuo sito conosciuti dai motori di ricerca, tipo http://www.marketleap.com/publinkpop/
ma se il link che ti porta i picchi è nuovo, o sconosciuto ai motori, potresti non trovarlo.
L'unica maniera certa per sapere da dove arrivano gli accessi (se le tue statistiche non lo indicano) è guardare gli acessi direttamente dai log del server (non tutti gli hosting però lo consentono). Se il tuo hosting lo consente, dovresti avere tra le directory (in ftp) una che si chiama "logs".