跟前妻有个儿子归前妻抚养,现在都各自有了新家庭,我也跟现在的老婆有了女儿。现在的老婆一直不允许我去见之前的儿子,前妻偶尔叫我帮忙完成儿子的作业,被我现在的老婆发现了。她发很大的脾气,要我立即删了前妻的QQ,并扬言如果之后再联系的话就离婚。现在的老婆其他方面都好,对我也挺好,就是不允许我跟前妻联系。我是该跟以前的孩子断绝来往好好过现在的日子,还是离婚?