结论：在此情况下，你的行为可能构成正当防卫，但也可能因防卫过当而承担一定的法律责任，具体取决于防卫行为的必要性和合理性。若被认定为正当防卫，则无需承担处罚；若被认定为防卫过当，则可能面临行政处罚或民事赔偿责任。
分析：
正当防卫的认定：
- 根据《中华人民共和国刑法》第二十条的规定，正当防卫是指为了使国家、公共利益、本人或者他人的人身、财产和其他权利免受正在进行的不法侵害，而采取的制止不法侵害的行为。在此情况下，如果残疾人先动手拿石头打你，你为了保护自己的人身安全而回击，且回击行为在必要限度内，那么你的行为可能构成正当防卫。
- 正当防卫的认定需要考虑多个因素，包括不法侵害的紧迫性、防卫行为的必要性、防卫手段与侵害手段的相当性等。如果防卫行为明显超过必要限度，造成重大损害，则可能构成防卫过当。
防卫过当的法律责任：
- 如果你的回击行为被认定为防卫过当，那么你可能需要承担一定的法律责任。根据《中华人民共和国刑法》第二十条第二款的规定，防卫过当应当负刑事责任，但是应当减轻或者免除处罚。不过，在轻微伤的情况下，通常不会涉及刑事责任，而可能面临行政处罚或民事赔偿责任。
- 行政处罚方面，如果公安机关认为你的行为违反了治安管理处罚法，可能会对你进行警告、罚款或拘留等处罚。
- 民事赔偿责任方面，如果残疾人的轻微伤是由你的防卫过当行为造成的，你可能需要承担一定的医疗费用、误工费等民事赔偿责任。
具体情境下的考量：
- 在实际判断中，还会考虑残疾人的具体状况（如残疾程度、是否具备完全民事行为能力等）以及你回击的具体方式、力度等因素。例如，如果残疾人因残疾而行动不便，你采取的回击方式却过于激烈，那么可能更容易被认定为防卫过当。
- 此外，如果现场有目击者或监控录像等证据，这些证据也将对判断你的行为是否构成正当防卫或防卫过当起到重要作用。
建议：
- 在面对类似情况时，首先应尽量保持冷静，避免使用过度暴力。如果可能的话，尝试通过躲避、呼救等方式来避免冲突升级。
- 如果确实需要采取防卫行为，应确保防卫行为在必要限度内，并尽量保留相关证据（如现场照片、视频、目击者证言等）以证明自己的行为是正当的。
- 在事后，应及时向公安机关报案并配合调查。如果面临行政处罚或民事赔偿等法律责任，建议咨询专业律师以获取更具体的法律建议。
如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询。