老公和小三聊房事逼我离婚

我跟我老公到现在认识11年了。我们在一起5年时，在生活好过点，买了车，他跟一个小他11岁的女孩好上并同居了，之前我跟他相处，他脾气不好，我都是顺着他，让着他，宠着他。我以为这就是爱他的方式。
那时候他家所有人都反对他跟那女孩在一起，他执意孤行，他说，等他跟那女孩分手后就和我结婚！我接受不了，离开了，啥也没带走，换了手机号，不想跟他再联系。结果他找我家人，再跟我联系上。断断续续的往我卡里打钱，大概有2到3万。我也想那是我应该得的，因为那是我跟他一起赚的钱。
又过3年，那时刚好有个男孩对我好，说想照顾我一辈子，陪我一起忘记过去。我很犹豫，因为对那个男孩没心动的感觉，跟他在一起也不是好的结果！刚好这时，他给我打电话，说跟那女孩分手了，求我回来，他会好好对我，还叫我原谅他这个负心汉。我想了很久，挣扎了很久。心底还是舍不得，怕错过就是一生。于是答应跟他重新开始，回来的这3年多，有了孩子，但是我们彼此都过得不开心，几乎说不了几句话就吵架。他老说我笨，不聪明，有多难听的话都说。我心里觉得他也许从来没爱过我。他自己也承认了，他说婚姻里总有一方爱得多一点，他也说爱那女孩比我多，只是他老给我打钱，那女孩不愿意才分手的。我想有孩子了也将就过吧，父母年龄大了，受不了打击，也不能再让他们操心了。半年前，我们带着孩子来他妈妈这边发展，（他妈妈再婚的，以前他在这边上过学）他没多久就跟以前的同学联系上了，还找到了上学时候喜欢的女人，每天就抱着手机聊微信，吃饭的时间除外。