结婚后，男人在赌博，一次原谅，之后就不赌博，但我和两个孩子从来不关心，没有责任感，完全没有负担，离婚被告人要怎么办？

《中华人民共和国婚姻法》
第三十一条　男女双方自愿离婚的，准予离婚。双方必须到婚姻登记机关申请离婚。婚姻登记机关查明双方确实是自愿并对子女和财产问题已有适当处理时，发给离婚证。
第三十二条　男女一方要求离婚的，可由有关部门进行调解或直接向人民法院提出离婚诉讼。 　　
人民法院审理离婚案件，应当进行调解；如感情确已破裂，调解无效，应准予离婚。
第三十六条　父母与子女间的关系，不因父母离婚而消除。离婚后，子女无论由父或母直接抚养，仍是父母双方的子女。 　　
离婚后，父母对于子女仍有抚养和教育的权利和义务。
　　
离婚后，哺乳期内的子女，以随哺乳的母亲抚养为原则。哺乳期后的子女，如双方因抚养问题发生争执不能达成协议时，由人民法院根据子女的权益和双方的具体情况判决。
孩子由谁直接抚养，与孩子的年龄和父母双方的收入、职业、道德等有关。
孩子如果在两周岁以内法院一般会判给女方，除非女方有重大不能治愈的疾病，不尽抚养义务或者没有抚养能力。

如果离婚，父或母都可争取孩子的抚养权。协议不成的可起诉，法院综合考虑双方的主张和实际情况根据有利于孩子的原则判决。一方抚养孩子，另一方应该支付抚养费，支付多少需综合考虑当地经济水平、孩子实际需求、支付方的支付能力等因素。
夫妻共同财产一般是平分，女方和无过错方可争取适当照顾。是否共同财产，要了解情况后才能为你分析。如果感情破裂无和好可能，可以离婚。如果协商不成，可约见律师，详述情况，请律师分析并协助制定处理方案。

协商不成，到法院起诉，主张分割共同财产 主张无过错损害赔偿，争取孩子抚养权，让对方支付抚养费。 中华人民共和国婚姻法 第三十六条 父母与子女间的关系，不因父母离婚而消除。离婚后，子女无论由父或母直接抚养，仍是父母双方的子女。 　　离婚后，父母对于子女仍有抚养和教育的权利和义务。 　　离婚后，哺乳期内的子女，以随哺乳的母亲抚养为原则。哺乳期后的子女，如双方因抚养问题发生争执不能达成协议时，由人民法院根据子女的权益和双方的具体情况判决。 　　第三十七条 离婚后，一方抚养的子女，另一方应负担必要的生活费和教育费的一部或全部，负担费用的多少和期限的长短，由双方协议；协议不成时，由人民法院判决。 　　关于子女生活费和教育费的协议或判决，不妨碍子女在必要时向父母任何一方提出超过协议或判决原定数额的合理要求。 　第三十九条 离婚时，夫妻的共同财产由双方协议处理；协议不成时，由人民法院根据财产的具体情况，照顾子女和女方权益的原则判决。 　　夫或妻在家庭土地承包经营中享有的权益等，应当依法予以保护。 　第四十六条 有下列情形之一，导致离婚的，无过错方有权请求损害赔偿： 　　
(一)重婚的； 　　
(二)有配偶者与他人同居的；