离婚四年了，当初是协议离婚没要抚养费，孩子女方也不管，请问我现在要是起诉，还能要回抚养费吗？

《关于审理离婚案件处理子女抚养问题的若干意见》第16条规定，一方要求变更子女抚养权，有下列条件之一的，人民法院应予支持：　　
1.与子女共同生活的一方因患严重疾病或因伤残无力继续抚养子女的。一方患病或者伤残，必然影响到对孩子的教育和照料，从孩子成长的角度出发，不是“如何变更抚养权?”的问题，而是必须要变更孩子抚养权问题。　　
2.与子女一同生活的一方不尽抚养义务或有虐待行为的或其与子女共同生活对子女身心健康有不利影响的。有的父母离婚时争夺抚养权不是为了给孩子创造更好的生活条件，只是为了在财产分割或是为了达到报复的目的。目的一旦达到，就对孩子不管不问，不履行自己的抚养义务，有的还甚至对孩子打骂虐待。在这种情况下，如何变更抚养权?关心孩子成长的另一方可以要求变更离婚孩子抚养权。但是，变更抚养权不能要求重新分割原有的共同财产。　　
3.十周岁以上未成年子女，愿随另一方生活的。十周岁以上的未成年人属于限制行为能力人，可以从事与其年龄相关的民事活动。父母离婚时，对于十周岁以上的子女的抚养权归属，应当听取孩子的意见。而在离婚时不满十周岁，过了几年，超过十周岁后，如果孩子明确表示愿意跟随另一方生活，就可以申请变更离婚孩子抚养权。
4.有其它正当理由需要变更的。

关于孩子的抚养权，法院会综合考虑夫妻双方的各自条件和实际情况，从更有利于孩子健康成长的原则出发判定孩子抚养权的归属。 一般抚养权判归女方的情况有以下情形 A、两周岁以下的子女，一般随女方生活 B、两周岁以上未成年的子女，如果女方有下列情形之一的，随女方生活
（1）已做绝育手术或因其他原因丧失生育能力的；
（2）子女随其生活时间较长，改变生活环境对子女健康成长明显不利的；
（3）无其他子女，而男方有其他子女的； 其他子女，不仅包括婚生子女也包括非婚生子女、养子女及有抚养关系的继子女等。
（4）子女随其生活，对子女成长有利，而男方患有久治不愈的传染性疾病或其他严重疾病，或者有其他不利于子女身心健康的情形，如男方有赌博、汹酒等不良嗜好，不宜与子女共同生活的；
（5）男方与女方抚养子女的条件基本相同，双方均要求子女与其共同生活，但子女单独随外祖父母共同生活多年，且外祖父母要求并且有能力帮助女方照顾外孙子女的；
（6）男女双方的抚养条件，如工作稳定程度、收入情况差距不大的前提下，如果男方对于夫妻感情破裂有过错，比如，有证据证明有婚外情等，孩子判归女方的可能性较大；
（7）如果男女双方均无明显过错，各方面条件都相当，如果女方的思想品质好一些，更有时间照顾孩子，得到孩子抚养权的可能性就会更大；
（8）十周岁以上的子女，自己选择随母生活的 4，抚养孩子是夫妻双方的法定义务，孩子如果判归一方抚养，另一方需支付抚养费的，若一方拒不支付抚养费，另一方可以以孩子的名义向法院起诉要求给付抚养费，法院判决后，抚养费可以申请法院强制执行；
5、至于夫妻共同财产，除非双方另有约定，否则一般应平均分割。

协议离婚一般是在自愿的情况下所达成的.但也有为了自己有所得而不得不放弃一些自己应得的权利的情况,你的情形就属于后者.
虽然你的协议过于显失公平,但由于是你自己自愿放弃和自愿承担的,并且没有他人的强迫下达成的.
你现在的情况与当时达成离婚协议的情况发生了很大的变化:一方面为了生活费而发愁,另一方面也为了小孩的扶养费为难.
因为你的经济情况发生了变化,可以以此为由,向法院起诉要求对方给付抚养费,但是对方也有可能以你的经济条件不适合再继续扶养孩子为由反诉要求取得孩子的抚养权.你知道,你如果确实没有经济能力抚养小孩的话,法院有可能会本着以有利于抚养小孩为由判由他抚养小孩.