dentro la cartella del tuo theme, dovrebbe esserci un file chiamato 404.php, è quel file che devi modificare.