平时像佣人一样的老公为何找小姐 要离婚吗

我今年32岁，是家里的老小，性格比较古怪，挺任性的，结婚已经8年了，女儿8岁。
我和他是相亲认识的，可以说是对他一点感觉也没有，听他而言他是对我一见钟情。由于介绍人是我单位的经理，年少时不懂，为了能有个好工作就将就了。我的收入一直比他高。婚前的日子我们过得也是一天小吵，几天大吵，可他对我很好，只要在他的能力范围内什么都可以满足我。
2007年，我的父亲去世，我的身体一下子垮了，有点抑郁，对他更挑剔了，几乎有一点不如意就是一场大吵，开始蛮体贴我的，随着时间的推移，厌烦了，对我越来越不在乎了。
今年的5月份，我发现他和一个歌厅的小姐互相打电话，发短信，我让他断，他不断，为此我们几乎每天吵，他说我对他的方式不对，到家从感觉不到家的温暖，让我给他足够的自由。6月份他做的很过分，对我只有厌恶，到了7月份我要求离婚，他有点收敛了，每天很早就到家，银行卡也全都上交给我了，可是还是没断，还有发短信。我们为了这个问题每天还是吵，甚至前天吵得时候他还动手了。别人都说我太较真了，睁一只闭一只眼，而且他也没怎么样，只是发发短信而已。而且还是全部上交给我的。