结论：您推开骂您的人是否算动手，需结合具体行为性质和后果来判断，可能涉及一般推搡行为或打架行为，甚至可能构成故意伤害罪。
分析如下：
一、推搡行为与打架行为的界定
推搡行为：
- 如果您只是轻轻地推开对方，没有造成对方人身伤害，且目的是为了制止对方的辱骂行为或保持安全距离，那么这种行为通常不被视为打架。
- 推搡行为更多是一种自我保护或制止不当行为的反应，而非主动攻击。
打架行为：
- 如果您推开对方的力度较大，导致对方摔倒、受伤或产生其他身体损害，那么这种行为可能被视为打架。
- 打架行为通常涉及双方或多方的互殴，且往往伴随着情绪的激动和行为的失控。
二、法律后果
一般推搡行为：
- 如果推搡行为没有造成对方人身伤害，那么通常不会引发法律责任。
- 但如果对方因此感到受辱或产生其他负面情绪，可能会引发民事纠纷，如要求道歉、赔偿精神损失等。
打架行为：
- 如果推搡行为导致对方受伤，且伤势达到轻伤以上，那么您可能构成故意伤害罪。
- 根据《中华人民共和国刑法》第二百三十四条的规定，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制。如果致人重伤或死亡，刑罚将更为严厉。
- 此外，打架行为还可能违反《中华人民共和国治安管理处罚法》，面临行政处罚，如拘留、罚款等。
三、建议与注意事项
保持冷静：
- 在面对辱骂等不当行为时，尽量保持冷静和理智，避免情绪失控导致行为过激。
寻求合法途径解决：
- 如果对方的行为已经构成侵权或违法，可以通过报警、起诉等合法途径来维护自己的权益。
注意行为力度和后果：
- 在推开对方时，要注意控制自己的力度和方式，避免造成对方人身伤害。
- 如果对方已经停止辱骂或表现出退让的意愿，应及时停止推搡行为。
总结：推开骂您的人是否算动手，需结合具体行为性质和后果来判断。如果只是轻轻的推搡且未造成伤害，通常不被视为打架；但如果导致对方受伤或产生其他严重后果，则可能构成打架行为甚至故意伤害罪。因此，在面对类似情况时，请务必保持冷静和理智，通过合法途径来维护自己的权益。如果您有任何法律问题或需要进一步的法律建议，请随时向我咨询。