[C] Creare un "Web Crawler" in linguaggio C

[fcrisafi]

Ciao vorrei realizzare un web crawler in linguaggio C.
Ma come faccio a leggere una pagina (ad esempio html) e ad estrarre i link (magari scrivendoli su un file di testo .txt)?

[fcrisafi]

mi è venuta una idea: potrei usare la funzione strstr per confrontare tutto il file html con la stringa head=" e copiare tutto quello che viene dopo fino alle prossime virgolette"....... idee migliori?

[MItaly]

Credo che le regex siano ancora la cosa migliore in questi casi...