è semplciemente una caratteristica di PHP (documentata nel manuale).

Le stringhe delimitate da apici singoli vengono stampate a video "così come sono".

Le stringhe delimitate da apici doppi, permettono la stampa del valore di eventuali variabili al proprio interno.

In ogni caso, come dice mangusta91, se concateni il valore vai sul sicuro.