恋爱烦恼，请大家提点意见～～

我今年22岁，去年谈了个男朋友比我大6岁．从一开始认识的时候，我就知道他已经离过婚，还有个快4岁的儿子，刚开始谈的时候觉得这一切都不是问题，那时候对他的感情也没怎么确定，觉得先谈着再说，将来的事还很不一定呢．可是现在谈久了，就越来越喜欢他了，想抽身都没办法．今年年初，他还到我家来拜年了，我家人不清楚他的情况，对他还可以．但是前几天，我爸从别人那打听到了他的情况，而且别人把他说的特别恶劣，说他老婆是被他打跑的，而且他特别爱玩．他比较爱玩我是知道的，我就是觉得和他一起玩比较开心，再说也没看过他乱玩．至于他打老婆，他以前跟我说过，他老婆总是和别的男人跑出去玩几天不回来，所以他们有几次吵的特别厉害，但是没说过他对他老婆动过手．现在我家人就是不同意我和他交往，说是我如果继续和他来往，就和我断绝关系．我有时候想想，为了这样一个男人付出也不太值得，但是叫我放弃他，我又舍不得，我这人以前还是比较花心的，很难真正喜欢上一个人，就怕如果放弃了，以后会后悔的．
大家给点意见吧，谢谢了～！