Non avevo notato che sono due tabelle diverse:

'SELECT tizio, caio FROM table WHERE id BETWEEN 1 AND 4
UNION
SELECT tizio, caio FROM my_albums WHERE id BETWEEN 5 AND 8'