我越来越讨厌我老公了，怎么办呢？

我爸妈也不喜欢他，一开始就不喜欢他，直到现在还是未能接受他，一个他家穷，二个他家远而偏僻。当初我是被爱情撞昏了头脑，糊里糊涂跟了他！因为他，家里给我介绍的有小车有大楼我都不要，难道这就是爱情换来的结果吗？
我们结婚5年了，有一个4岁的女儿，开始我认为这些都不重要，现在穷不等于以后穷，只要我们以后努力就行了，可是事实并不是这样。我越来越讨厌我老公了，越来越觉得他没用，没有一点上进心，有时就像一个窝囊废一样，这也不懂那也不会，什么事都做不好，因为他连我和我家都被人看扁了，我越想越不甘心，好想离开他，好想解脱，但是我又舍不得我女儿，他也不肯放手，我还年轻这下半辈子该怎么过啊？……
并不是他不肯放开女儿，而是不肯放开我，他很怕我离开他，老是喜欢查看我的手机信息和QQ.
还有， 他是湖南的我是广东的，我不想在湖南安家，他家偏僻、远；他也不想在我家安家，他觉得人生地不熟，也没面子。我俩又没本事在广州买房子，哪又该怎么办呢？