18年的婚姻她多次出轨 我要不要去原谅

18年前经人介绍我认识了我老婆，当时也是看对眼了慢慢的相处中两个人感情也是非常好，虽然没领结婚证我们就生活在一起了，但家里办了酒席也算是结婚了，之后我们就有了自己的孩子，我是做一点小生意，老婆是一个人民教师，所以在生活条件上也是挺好的。
5年前由于生意不好做，我就出门去打工了，3年前我老婆耐不住寂寞认识了一男的，在精神和肉体上都出轨了。最开始也是听到别人的风言风语传的，我是不相信的因为做为一个人民教师这种事情应该不会发生的，况且我们的感情也一直很好，但我还是旁敲侧击的问过她，她还说我多心，不信任她就是不承认的。
直到有一次我从外地回来想给她个惊喜晚上就去他们学校接她下班，然而在他们学校门口的僻静处我就看到了我不该看到的一幕，她和一个男的相拥在一起，我当时就给她打电话，问她在哪，她说在家，再之后回家后再我的再三追问下，她终于承认了他出轨的事实，就在那一瞬间我接受不了，就打骂了他一顿，她也跟我认了错，说以后再也不会做对不起我的事情了，因为我们有两个未成年的孩子，我不想他们生活在一个支离破碎的家庭，也不想让他们知道自己的母亲是这样的一个人，虽然我心理上还是有阴影，但为了孩子。加上我们也有这么多年的感情，我还是选择原谅了她。
可是更让我受不了的是，她竟然又趁我不在家又去外面跟那个男的鬼混，这是我实在接受不了的，现在我就想跟她离婚，虽然我们没有结婚证，但是我们有了孩子，法律上这是事实婚姻。我现在就想的就是离开她，但是这几年她整天哭哭啼啼的我走哪她跟哪，一个劲的给我道歉，求我原谅，还教唆孩子来劝我，可我真的就想离开她。
在这期间我在网上也认识了一个女的，我们经常谈心，她也了解我的情况，慢慢的我们就产生了感情，我现在就想离开我这个出轨的老婆重新开始一段新的生活。当然我还是孩子的父亲，该尽的义务该给的关心和爱我一样不会少，只是想离开这个给我戴绿帽子的女人，可是她竟然以死相逼，求得我的原谅，我不想让我的孩子失去母亲，不想让孩子伤心，我到底该咱么办？