Измените ему.
В результате или спокойно расстанетесь или поднимете свою самооценку и его тонус в отношении вас.