爱上离婚的女人有小孩 我左右为难不知如何是好

我没有结过婚，一年前，我爱上一个离婚的女人，她有小孩，为此家里人一直不同意，就这么一直拖着，唉！

我今年27岁了，从小父母就离婚了，母亲在我3 4岁的时候就另嫁他人了，我小时候和爷爷奶奶一起生活，但爷爷奶奶是做菜，打扫，睡觉都不在一起，个过个的生活。
我长大后，总是没有安全感，原生家庭对我影响很大，我内心需要一份稳定的婚姻。