Dipende da come hai fatto il server!!! L'hai programmato per gestire la risposta a più client ???

Posta tutto il codice!!! O almeno quello del server.... Perchè cosi è un po poco per poterti aiutare!!!

Un consiglio per capire che errori avvengono, conviene mettere la recv in un if è chiamare la perror();

codice:
if ( (ric = recv(....)) < 0 ) 
         perror("Errore recv\n");