Salve a tutti, vorrei discutere con voi, sicuramente più esperti di me, su come realizzare un bot/spider/crawler per la creazione di un cockpit.
In particolare il cockpit in questione deve analizzare delle pagine fornite (magari in un array o in qualsiasi altro modo) alla ricerca di alcuni prezzi.
Ora voglio rivolgere a voi queste domande:
che linguaggio utilizzare? C? php? altro?
Inoltre come posso renderlo flessibile? Nel senso che ho visto un po in rete che bot del genere prendono un div o un tag particolare, ma se cambia la grafica del sito? Perdo tutto...
E inoltre, mi sapere dare qualche dritta, qualche guida da leggere, qualche documento con il quale informarmi di più per realizzare un'applicazione fatta a dovere?
Inoltre, ancora, volevo chiedervi: come fanno i vari siti "aggregatori" ad essere così elastici nel raccogliere le varie informazioni da altri siti e raccoglierle correttamente? (ovviamente senza utilizzare servizi di affiliazione che prevedono xml o quant'altro..)
Grazie...