我女儿一直和我住在一起，但是在男人里面，现在男人想回到孩子身边，孩子不想，在男人不在乎孩子的时候，现在我想要女儿，我该怎么办？

双方离婚协议已办孩子归男方了，女方还可以起诉要回孩子抚养。可向法院提起诉讼，要求变更抚养关系。
根据最高人民法院《关于人民法院审理离婚案件处理子女抚养问题的若干具体意见》有关规定：
人民法院审理离婚案件，对子女抚养问题，应当依照《中华人民共和国婚姻法》第二十九条、第三十条及有关法律规定，从有利于子女身心健康，保障子女的合法权益出发，结合父母双方的抚养能力和抚养条件等具体情况妥善解决。
根据上述原则，结合审判实践，提出如下具体意见：
15、离婚后，一方要求变更子女抚养关系的，或者子女要求增加抚育费的，应另行起诉。
16、一方要求变更子女抚养关系有下列情形之一的，应予支持。
（1）与子女共同生活的，一方因患严重疾病或因伤残无力继续抚养子女的；
（2）与子女共同生活的一方不尽抚养义务或有虐待子女行为，或其与子女共同生活对子女身心健康确有不利影响的；
（3）十周岁以上未成年子女，愿随另一方生活，该方又有抚养能力的；
（4）有其他正当理由需要变更的。

根据我国法律规定，有下列情形之一的，可以要求变更抚养关系：
（一）与子女共同生活的一方因患严重疾病或因伤残无力继续抚养子女的。如有抚养权的一方因伤致残或者经济收入突然下降，无法保证子女基本花费，那么另一方就可以要求变更抚养权；
（二）与子女共同生活的一方不尽抚养义务或有虐待子女行为，或其与子女共同生活对子女身心健康确有不利影响的。
如拥有抚养权的一方拒绝为子女的教育、生活支付基本费用的或者殴打子女的，那么另一方也可以要求变更抚养权；
（三）十周岁以上未成年子女，愿随另一方生活，该方又有抚养能力的。
如果子女年满十周岁，另一方也有能力抚养孩子的，那么抚养关系的变更就应充分考虑子女的意见，以确保利于子女的身心健康和健康成长；
（四）有其他正当理由需要变更的。如有抚养权的一方因工作的变化，难以使孩子接受良好持续的教育，那么另一方就可以要求变更抚养关系。
如果满足以上任一条件，而要求变更抚养关系的，法庭一般都会予以支持。

一、根据《婚姻法》第36条并结合最高人民法院《关于人民法院审理离婚案件处理子女抚养问题的若干具体意见》的规定，对于离婚诉讼中子女抚养的问题，可以归纳如下:
　　
(1)两周岁以下的子女的抚养问题。两周岁以下的子女，一般都处在哺乳期，一般随母方生活。但是母方有下列情形之一的，可随父方生活:
　　①患有久治不愈的传染性疾病或其他严重疾病，子女不宜与其共同生活的;
　　②有抚养条件不尽抚养义务，而父方要求子女随其生活的;
　　③因其他原因，子女确无法随母方生活的。
　　父母双方协议两周岁以下子女随父方生活，并对子女健康成长无不利影响的，可予准许。
　　
(2)对两周岁以上未成年的子女，父方和母方均要求随其生活，一方有下列情形之一的，可予优先考虑:
　　①已做绝育手术或因其他原因丧失生育能力的;
　　②子女随其生活时间较长，改变生活环境对子女健康成长明显不利的;
　　③无其他子女，而另一方有其他子女的;
　　④子女随其生活，对子女成长有利，而另一方患有久治不愈的传染性疾病或其他严重疾病，或者有其他不利于子女身心健康的情形，不宜与子女共同生活的。
　　
(3)父方与母方抚养子女的条件基本相同，双方均要求子女与其共同生活，但子女单独随祖父母或外祖父母共同生活多年且祖父母或外祖父母要求并且有能力帮助子女照顾孙子女或外孙子女的，可作为子女随父或母生活的优先条件予以考虑。
　　
(4)父母双方对10周岁以上的未成年子女随父或随母生活发生争执的，应考虑该子女的意见。
　　
二、离婚时，夫妻财产的处理可以分为两个方面:
　　
(1)夫妻一方特有财产的处理:夫妻一方的特有财产，归个人所有。
　　
(2)夫妻共同财产的处理:夫妻的共同财产由双方协议处理，当事人因离婚就财产分割达成的协议，对男女双方具有法律约束力。协议不成时，由人民法院根据财产的具体情况，照顾子女和女方权益的原则判决。