结论：您是否会被拘留取决于具体情节和后果，若对方辱骂行为未构成严重违法，而您动手打人导致对方受伤，则您可能面临行政处罚甚至刑事责任；若双方行为均较轻，可能仅受治安管理处罚。以下为详细分析：
一、对方辱骂行为的法律性质
对方到您家里辱骂您，这一行为可能构成对您的名誉权或人格尊严的侵犯。根据《中华人民共和国治安管理处罚法》的相关规定，公然侮辱他人或者捏造事实诽谤他人的，处五日以下拘留或者五百元以下罚款；情节较重的，处五日以上十日以下拘留，可以并处五百元以下罚款。然而，这一规定主要针对的是公然场合下的侮辱行为，对于家庭内部的辱骂，虽然同样可能构成侵权，但在治安管理处罚上的适用可能相对灵活，具体还需根据辱骂的严重程度、场合、影响等因素综合判断。
二、您动手打人的法律后果
行政处罚：
- 如果您动手打人，导致对方受到轻微伤害（如皮肤擦伤、轻微肿胀等），根据《中华人民共和国治安管理处罚法》第四十三条的规定，您可能面临五日以上十日以下拘留，并处二百元以上五百元以下罚款；情节较轻的，处五日以下拘留或者五百元以下罚款。
- 如果您的行为被认定为“情节较轻”，比如对方先动手、您出于自卫或制止对方不法行为而动手等，那么您可能仅受到五日以下拘留或者五百元以下罚款的处罚。
刑事责任：
- 如果您动手打人导致对方受到较重伤害（如骨折、内脏损伤等），则可能构成故意伤害罪。根据《中华人民共和国刑法》的相关规定，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制。致人重伤的，处三年以上十年以下有期徒刑；致人死亡或者以特别残忍手段致人重伤造成严重残疾的，处十年以上有期徒刑、无期徒刑或者死刑。
三、综合判断与建议
情节较轻的情况：
- 如果对方辱骂行为未构成严重违法，且您动手打人导致对方受伤较轻，那么双方可能均受到治安管理处罚，但您因动手打人可能面临更重的处罚。
情节较重的情况：
- 如果对方辱骂行为构成严重违法（如长时间、持续性的辱骂，或辱骂内容极其恶劣），且您动手打人导致对方受伤较重，那么您可能面临刑事责任，同时对方也可能因辱骂行为受到治安管理处罚。
建议：
- 在面对对方辱骂时，尽量保持冷静，避免动手打人。可以通过报警、寻求社区帮助或法律途径来维护自己的合法权益。
- 如果已经动手打人，且对方受伤，应立即停止冲突，并主动承担医疗费用等责任，以减轻可能的法律后果。
- 无论何种情况，都建议咨询专业律师（即我本人），以便更准确地了解自己的法律权利和义务，以及可能面临的法律后果。
最后，希望您能够理性处理此类纠纷，避免采取过激行为导致不必要的法律后果。如有任何法律问题，欢迎直接向我咨询。