¿Qué debería hacer cuando le digo a mi novio que me avise si quiere cenar más tarde y se fue con su amigo?

Creo que deberías confirmar tus planes. En lugar de dejarle saber que está disponible para la cena, haga algunos planes. Entonces invítalo a cenar.