我弟媳妇在我侄女出生才几个月的时候就离家出走了，一直到现在我侄女已经快4周岁了还没回来，所以我弟弟想提出离婚并要求女方赔偿和我侄女的赡养费。

如果一方下落不明，另一方可以在自己户籍所在地或者经常居住地起诉离婚，法院会做公告送达，时间会长一些，具体如何操作可以和律师面谈咨询。
根据法律规定，分居满两年是法定的感情破裂的情形，法院判决离婚的可能性较大。
需要注意的是法律上分居并不包括分房居住，而且必须是因感情不和分居，比如，夫妻分别在两地工作，因相隔遥远而没有同居条件，这种夫妻分居并不是因感情不和而造成的，即使分居的时间再长，也不符合“因感情不和而分居”的法定应准予离婚的情形。
并且分居满两年后并不能自动离婚，只是法院判决离婚的一个条件。

离婚可以要求夫妻扶养费，而不是赡养费。《婚姻法》第三十四条规定女方在怀孕期间、分娩后一年内或中止妊娠后六个月内，男方不得提出离婚。女方提出离婚的，或人民法院认为确有必要受理男方离婚请求的，不在此限。按你以上所述情况来看，现在男方提出离婚，法院不会受理。　　抚养权问题　　孩子不满两周岁的，一般随母方生活。母方有下列情形之一的,可随父方生活:
(1)患有久治不愈的传染性疾病或其他严重疾病，子女不宜与其共同生活的;
(2)有抚养条件不尽抚养义务，而父方要求子女随其生活的;
(3)因其他原因，子女确无法随母方生活的。如无上述情况，孩子的抚养权应该是女方的。　　扶养费问题　　婚姻法第四十二条规定;“离婚时，如一方生活困难，另一方应从其住房等个人财产中给予适当的经济帮助。具体办法由双方协议;协议不成时，由人民法院判决。”离婚时，如果一方生活确有困难，另一方仍有提供适当经济帮助的责任，具体办法可由双方协议。一方年轻有劳动能力，但生活暂时有困难，另一方可给予短期的或者一次性的经济帮助。双方结婚多年，一方年老病残、缺乏劳动能力又缺乏生活来源，另一方应在居住和生活方面，予以适当的安排。在执行经济帮助期间，受资助的一方另行结婚的，另一方可以终止给付。原定的经济帮助执行完毕后，一方又要求另一方继续给予经济帮助的，一般不予支持。

《老年人权益保障法》第15条规定，“赡养人不履行赡养义务，老年人有要求赡养人付给赡养费的权利。”　　父母对子女有扶养教育的责任，子女对父母有赡养扶助的义务。经济上供养、生活上照料和精神上慰藉是赡养义务的具体内容。支付不低于当地一般生活水平的赡养费，是经济上供养的一种形式。　　因此，赡养人不履行赡养义务，老年人有要求赡养的权利，也有要求赡养人支付赡养费的权利。老年人上述要求可以通过三种途径去实现。　　
(1)有权要求赡养人所在单位出面调解，对不履行赡养义务的赡养人进行批评教育，责令改正。　　
(2)由当地政府负责民事调解的部门即调解委员会调解处理。　　
(3)直接向人民法院起诉。人民法院可以依法裁定先予执行。情节严重构成犯罪的，还应追究赡养人的刑事责任。