Это его выбор. Тянуть не нужно.
Проверено: не охладел. Даже наоборот.
Но тут, наверно, нужно учитывать в каких отношениях состоишь с мужем.;)
Например, мы с мужем помимо любовников еще и друзья. Я с ним советуюсь по всем своим вопросам (например, идет ли мне платье), он со мной обсуждает свои...