Возможно муж понимает, что эта связь не достаточно серьезна, чтобы прерывать ваш с ним союз. Может, мимолетный порыв, не более. Поэтому и занял нейтральную позицию.
Тут, наверное, правильнее будет подождать и не торопиться..