Lo mejor sería que estemos juntos cuando tengamos ganas,

Es lo mismo que decir: "Te dejo pero te quiero tener a mi disposición por si te extraño un poco".