老公已经第三次精神出轨了，我要和他离婚吗？

我和老公都是80后，他比我大四岁。我是在毕业三个月之后遇到他的，那时他父母急着让他结婚，逼着他去相亲。结果他见到我以后，好像见到了救生圈，马上跟他父母说自己看上了一个女孩子。我之前有一次很不正式的恋爱，在一起更像朋友，后来不到半年就分手了，中间还夹着一个假期。他之前也有过几次恋爱。但我们都是彼此的第一次。用他的话说我长得挺好的，历史又清白，这么好的老婆哪找去。
一个星期后，我回家的时候，他父母在车站等我说要带我去吃饭，当时听我老公说他们都等一个小时了，真的不好意思拒绝，后来很顺理成章的我们就见了彼此父母，然后都很满意，七个月以后就订婚了。当时他们家在我们这儿的县城开了一个厂，我平时在市里工作，所以定婚以后我们还是分开在两地。
后来也就有了他的第一次精神出轨，我就给这叫精神出轨吧。我是个很敏感的人，那段时间不知道为什么就是不踏实，后来去查他的电话记录，密码输了几次居然对了。我们订婚后一个多月的时间里他都在和一个女孩子发短信。有一天晚上我们吵架了，他给那个女孩子打了两个多小时的电话。我按他通话簿中的那个电话打过去，是个女孩子，我说打错了之后她很和气。可是挂了电话我都崩溃了，后来我想也许是别人接的那个人的手机，第二天我又打过去，还是那个女孩。那天，我一下午都不知道怎么过的，晚上怎么都睡不着。可是那一天一夜的时间里我都忍着没打电话说他什么，我对自己说要冷静，我不知道应该怎么和他说。可是真的很难受。