A meno che tu non stia utilizzando un CMS comune, devi creare del codice ad-hoc a seconda della struttura del sito. Gli script automatici che eseguono lo scraping del sito, nella maggior parte dei casi non generano una sitemap completa con tutti i problemi del caso.