老公有外遇怎么办他还舍不得小三 小三主动给我打电话(2)

昨天老公又一次见到那女，那女打电话过来，老公说是碰到，不是专门找她，我很生气，因为我们最近关系很好，可他还这样，我把一切家务都包了，他还说太累，压力大，回家就上网打游戏。
我不在时偷着聊天，我为体谅他，不喜欢唠叨他，不提这事，把自己打扮的漂亮，家里搞的整洁，饭菜做的可口，我也感觉自己很累，可为这个家我愿意牺牲。
我现在真的糊涂了，我作错了什么，我从认识他就没接触过男人，我对感情专一，比较痛恨婚外恋，现在我怎么办？离婚好像不至于，不离他过一段就开始不安分。
我们也签订过协议，只要他再出轨，我们离婚，他净身出户，昨天他还解释自己不是坏人，不花心，还说我应该出去工作，我感觉自己好累，公司的杂事我管、财务我管，我也委屈。
何况，我从发现到现在努力改善我们的生活与工作，安排一起旅游、周末看电影、找朋友聚餐、工作上努力配合他。
我不知道下一步怎么对他，他脾气不好，还喜欢骂人，赖皮性格，喜欢唠叨，我比他人缘好，有很多朋友，他没有，孩子随我，很优秀，他爱我，爱孩子，爱家，也努力挣钱为家，他每天都回来吃饭睡觉，除非应酬，我该怎么办？