Ti consiglio di utilizzare un servizio tipo atomoz, questo perchè anche se crei un motore di ricerca poi i contenuti li devi inserire a mano visto che creare uno spider è abbastanza complicato.