Mi spiego meglio, dovrei prendere in considerazione la sorgente di 558 pagine, ovvero le pagine del risultato di una ricerca, ma non ho voglia di scrivere 4000 righe di codice.. QUindi mi domandavo se c'è un modo rapido per fare ciò..(pagine esterne)
require o include se sono locali, fopen/curl altrimenti
Lo so ma il problema è che anche con fsockopen devo sempre scrivere piu' di 2000 righe (dato che devo fare altre operazioni per ognuna), la mia richiesta era come fare senza dover scrivere 2000 righe, dato che ora ho visto che un risultato arriva a 5000 pagine, non starò a scrivere 20mila righe di codice
ma esattamente cosa devi fare che non si capisce?
Devo contare quanti: <td class="text"> ci sono nei risultati di una ricerca.. Pensavo dato che in una pagina ci sono 10 risultati, potrei fare 10*NUMEROPAGINE, però se nella pagina finale non ce ne sono 10 diventa un problema.
più prolissa come spiegazione.
perchè devi sapere quanti td ci sono in una pagina?
non puoi semplicemente fare un count sul db per sapere quanti risultati corrispondono alla ricerca?
Le pagine non sono mie, devo sapere quanti td ci sono dato che rappresentano un 'tag' in un gioco, ogni td = 1 tag e devo contare quanti tag ci sono non andando per forza in quel sito.
mmm onestamente non mi piace l'idea di insegnare tecniche di scrapping più o meno legali su un forum...
temo dovrai fare da solo o.o/
non vedo cosa ci sia di non legale <.<
ti assicuro che se sul log di apache del mio server risultano richieste a catena senza interruzione di 2000 pagine web provenienti dallo stesso ip non ci metto più di due minuti a bloccarle :P
e sopratutto se il sito voleva offrire quel tipo di servizio ti forniva un api per interrogare il server, ergo stai facendo qualcosa che loro sicuramente non gradiscono.
non so cosa debba farci tu nello specifico, ma non me la sento di scrivere su un forum una guida su come rubare in massa i contenuti di un altro sito web :P
Permessi di invio
Rispondi quotando