和老公吵得很厉害，彼此之间用他的话说只剩怨恨了，我们吵的中心就是围绕我觉得他不爱我，我生孩子回老家

和老公吵得很厉害，彼此之间用他的话说只剩怨恨了，我们吵的中心就是围绕我觉得他不爱我，我生孩子回老家，一百多公里，他一个月甚至更长时间回来看一下，生的时候也没有在，孩子满月也没有在。周边的亲戚朋友总说闲话，我该怎么办