Il file che indichi probabilmente non è l'unico che manca nel computer del tuo amico.
Per installare correttamente un'applicazione, grande o piccola non importa, non è sufficiente copiare il file EXE, ma occorre generare un Setup servendosi di strumenti appositi.
Se il tuo programma è molto semplice puoi usare anche il wizard presente tra gli accessori di Visual Studio, ma tieni presente che è giustamente considerato poco affidabile.