Ho provato anche a non utilizzare

Codice PHP:
if (!isset($_SESSION["visita"])) 
ma a utilizzare direttamente if $_SESSION["visita"] != 1

solo che così facendo mi aggiorna il contatore anche con i refresh della pagina