男女双方已经离婚2年多，但是男方还是经常到女方租住房住，自认为跟没离婚一样，女方想着只要没矛盾，也没说不让回家住(租住地)。男方是货车司机，外出时没事，不喝酒时也没事，但是只要一喝酒，回到家就会各种理由找事，辱骂女方，理由就是怀疑女方有男的，(男女双方均差不多50岁了)，家里还有一个10来岁的小孩和80多岁的老人，考虑到小孩和老人，实在不想一直这样无助，请问从法律途径该如何解决？补充：中间因为男方闹事，曾经报过警，但都是很快就放出来了

1、两周岁以下的子女，一般随母方生活。母方有下列情形之一的，可随父方生活：rn　　
（1）患有久治不愈的传染性疾病或其他严重疾病，子女不宜与其共同生活的；rn　　
（2）有抚养条件不尽抚养义务，而父方要求子女随其生活的；rn　　
（3）因其他原因，子女确无法随母方生活的。rn　　
2、父母双方协议两周岁以下子女随父方生活，并对子女健康成长无不利影响的，可予准许。rn　　
3、对两周岁以上未成年的子女，父方和母方均要求随其生活，一方有下列情形之一的，可予优先考虑：rn　　
（1）已做绝育手术或因其他原因丧失生育能力的；rn　　
（2）子女随其生活时间较长，改变生活环境对子女健康成长明显不利的；rn　　
（3）无其他子女，而另一方有其他子女的；rn　　
（4）子女随其生活，对子女成长有利，而另一方患有久治不愈的传染性疾病或其他严重疾病，或者有其他不利于子女身心健康的情形，不宜与子女共同生活的。rn　　
4、父方与母方抚养子女的条件基本相同，双方均要求子女与其共同生活，但子女单独随祖父母或外祖父母共同生活多年，且祖父母或外祖父母要求并且有能力帮助子女照顾孙子女或外孙子女的，可作为子女随父或母生活的优先条件予以考虑。rn　　
5、法律依据：《最高人民法院关于人民法院审理离婚案件处理子女抚养问题的若干具体意见》第一至第四条