ok, basta che non ci siano altri tag base nelle pagine che vai ad includere altrimenti penso che si incasinino un po' le cose

codice:
<base href="http://www.sito_b.com" />
</head>
PS: chiaramente non andrà con url assoluti, i quali resteranno tali.