我怀孕的时候发现丈夫对我不忠，当时我跟
他协议离婚了，并没有约定孩子的抚养权归谁。现在孩子出生了男方家跑来要回孩子，请问如何确定婴儿抚养权？

协议离婚又称两愿离婚或登记离婚，我国《婚姻法》中称作双方自愿离婚，指婚姻关系因双方当事人的合意而解除的离婚方式。《婚姻法》第三十一条规定，男女双方自愿离婚的，准予离婚。
双方必须到婚姻登记机关申请离婚。婚姻登记机关查明双方确实是自愿并对子女和财产问题已有适当处理时，发给离婚证。 依据不同的分类标准，可以将协议离婚分作不同的种类。综观各国的法律规定，对协议离婚大致有以下两种分类：
第一，以认可离婚的机关或适用程序为标准，协议离婚分为行政协议离婚和诉讼协议离婚。
①行政协议离婚是经过行政程序办理的协雄离婚，其中的行政机关包括户籍机关(如日本、蒙古的情况)、民事机关(如墨西哥的情况)、其他行政机关(如丹麦、挪威的情况①)。②诉讼协议离婚是由法院通过审判程序办理的协议离婚。
它又分作两种情况：其一，当事人的离婚协议须经法院审批(如法国的情况);其二，当事人的离婚协议须经法院裁决(如奥地利的情况)。
第二，以达成合意的方式为标推，协议离婚又可以分为三类：①由当事人双方共同申请的离婚。
即当事人先对全部离婚问题达成合意，然后提出申请。②一方提出离婚问题的要求，另一方予以承诺的离婚。③调解离婚。这种类型有两种：其一，一方当事人要求离婚，经调解双方就全部离婚问题达成合意。
其二，双方当事人都同意解除夫妻人身关系，经调解双方又对其后果达成合意。

根据最高人民法院《关于人民法院审理离婚案件处理子女抚养问题的若干具体意见》有关规定：
人民法院审理离婚案件，对子女抚养问题，应当依照《中华人民共和国婚姻法》第二十九条、第三十条及有关法律规定，从有利于子女身心健康，保障子女的合法权益出发，结合父母双方的抚养能力和抚养条件等具体情况妥善解决。根据上述原则，结合审判实践，提出如下具体意见：
10、父母双方可以协议子女随一方生活并由抚养方负担子女全部抚育费。
但经查实，抚养方的抚养能力明显不能保障子女所需费用，影响子女健康成长的，不予准许。
抚养方的抚养能力可以保障子女所需费用，不影响子女健康成长的，父母双方可以协议由抚养子女的一方子女全部抚育费。

协议离婚是需要 写离婚协议书的，离婚协议书中应该对孩子的抚养有明确的约定，办理离婚手续后，按照离婚协议书有约定的内容抚养孩子就可以了。
如果离婚协议书中回避了孩子的抚养问题，双方可以就孩子抚养起诉，要求法院判决，原则上两周岁以内的子女原则上女方抚养，两周岁 至十周岁之间的子女按照有利子女成长的原则判决，十周岁以上的子女可以争取孩子意见。