我爱上了已婚男人,他说也爱我,但问题是我们都有家庭的人,虽然我们都结婚了但是那都没有感情的,我跟他都很相爱,但是他又说不想伤害家庭也不想抛弃我,而我现在也很讨厌我老公可是一想到小孩我的心就很痛不知道要该怎么办?到底是放弃爱情还是放弃家庭呢?请个位网友帮帮我该怎么办?