如果对方对我语音攻击辱骂我，我去推他，然后她对我进行了拳打算谁的责任

对方有辱骂行为的，属于对当事人的人格侮辱，但是当事人不能以打人来回应，因为打人会触犯治安管理规定，甚至会构成刑事犯罪。如果是轻微伤，当事人不会面临刑事处罚;如果造成轻伤，当事人有可能面临三年以下的有期徒刑、拘役或者管制。

对方有辱骂行为的，属于对当事人的人格侮辱，但是当事人不能以打人来回应，因为打人会触犯治安管理规定，甚至会构成刑事犯罪。如果是轻微伤，当事人不会面临刑事处罚;如果造成轻伤，当事人有可能面临三年以下的有期徒刑、拘役或者管制。法律依据：《中华人民共和国治安管理处罚法》第四十三条规定：“殴打他人的，或者故意伤害他人身体的，处五日以上十日以下拘留，并处二百元以上五百元以下罚款;情节较轻的，处五日以下拘留或者五百元以下罚款。

法律分析：
骂人了被打责任算打人者。要承担行政处罚，其次可能要根据受害者伤情承担民事赔偿责任；此外，情节严重可能需要承担刑事责任。
一般来说，先动手的一方过错责任较大，当然如果对方侮辱、诽谤在先，情节恶劣的，那责任就不一定在于先动手的一方。不论谁先动手，只要有殴打他人的行为并造成一定危害会受到处罚。对于被侵害人有过错或对矛盾激化负有责任的，一般可从宽处罚。 故意伤害、殴打他人身体经鉴定构成轻伤的，涉嫌构成故意伤害罪，处三年以下有期徒刑、拘役或者管制。不构成轻伤的，处治安处罚。
由此可见，对于打人的人肯定需要承担相应的法律责任。情节较轻的按照治安来进行处罚，情节严重的构成犯罪还要承担相应的刑事责任，所以大家需要根据具体的情节来进行分析，不过责任肯定是动手打人的人进行承担。
法律依据：
《中华人民共和国治安管理处罚法》 第四十三条 殴打他人的，或者故意伤害他人身体的，处五日以上十日以下拘留，并处二百元以上五百元以下罚款。如果有下列情形之一的，处十日以上十五日以下拘留，并处五百元以上一千元以下罚款：
(一)结伙殴打、伤害他人的;
(二)殴打、伤害残疾人、孕妇、不满十四周岁的人或者六十周岁以上的人的;
(三)多次殴打、伤害他人或者一次殴打、伤害多人的。
衍生问题：
打架被鉴定为轻伤该怎么处理
打架被鉴定为轻伤的处理：
一、先进行鉴定，经伤情鉴定构成轻伤的，涉嫌故意伤害罪，有权要求公安机关追究刑事责任，同时提出刑事附带民事赔偿。
二、公安机关不追究的，自己可以向法院提起刑事自诉。
三、也可就伤情问题，单独向人民法院提起民事诉讼。