我40岁,爱上一个50岁的男人,我们彼此很相爱感觉很好,在一起一年了。我们大家都有家室儿女。但好景不长,对方老婆知道了非闹离婚,他愿意为了我离婚,愿意为我一个人过,静静的为我守候。我自己家庭还好,我不想离婚,他答应我不要离婚,就这样偷偷过下去。我能让对方为我而离婚吗?