Ciao ragazzi,
ho in mente di progettare uno spider sotto linux in linguaggio C.
qlk di voi sa x caso come avere una "lista completa" di tutti i domini web?
Questa domanda mi sorge in quanto attraverso le socket di C potrei fare uno SCAN di un range di IP e interrogarli (richiedere delle pagine etc..) ma operando in questo modo sussiste un problema in quanto sui SERVER di HOSTING spesso su uno stesso IP hanno più domini web quindi il server che risponde al mio tentativo di connessione non riesce a risolvere la richiesta.
Di conseguenza mi interessa capire se c'è un modo x avere l'elenco di tutti i domini web attivi.
Io credo che questo sia possibile in quanto esistono dei server che hanno un database con l'elenco dei domini attivi..resta solo il problema di scoprire come interrogarli.
Vi siete mai chiesti come fa il vostro browser a "tradurre" da un URL all'indirizzo IP corrispondente? procede allo stesso modo:
si connette ai server con i DATABASE dei domini chiede il rispettivo IP associato all URL digitato poi contatta il SERVER su cui effettivamente c'è il dominio...
tnx Dav