Potresti settare una variabile di sessione non appena aggiornato il contatore.
Al successivo accesso alla pagina controlli se la variabile è settata, così puoi evitare di incrementare le visite ad ogni refresh.