已婚女人爱上已婚男人了

我是已婚女人，我和老公也很相爱，但是当我遇到一个已婚男以后就无法自拔了，我和他是一见钟情都藏在心里好受，我们从没做过出格的事，明知不会舍弃自己的家庭和他在一起，就是忘不了他，有时给已婚男发信息吧半天才回，不理他吧他还主动找你聊天，对我不冷不热的态度让人很痛苦，不理他又不舍得，离开他又不甘心，我该怎么办？这样真的好痛苦，我也不知道他到底爱不爱我？