结论：赠予对方的钱，在对方辱骂自己的情况下，一般不能直接要回，但存在特定情形时可以主张撤销赠与并要求返还。
一、一般情况：赠与完成，难以直接要回
在一般的赠与关系中，一旦赠与财产的权利发生转移（例如，钱款已经交付给对方），赠与合同即告完成，赠与人通常不能随意撤销赠与并要求返还赠与物。这是因为赠与合同是赠与人将自己的财产无偿给予受赠人，受赠人表示接受的合同，一旦完成，就产生了法律效力。
二、特定情形：可主张撤销赠与并要求返还
尽管一般情况如此，但存在以下特定情形时，赠与人可以主张撤销赠与并要求返还：
附义务的赠与未履行：
- 如果赠与合同中附有义务（例如，要求受赠人履行某种特定的行为或义务），而受赠人未按照约定履行该义务，赠与人有权撤销赠与并要求返还赠与物。
- 举例：若你赠与对方一笔钱，并约定对方需用此款进行某项公益活动，但对方未履行，则你可主张撤销赠与。
受赠人严重侵害赠与人或其近亲属的合法权益：
- 如果受赠人严重侵害了赠与人或其近亲属的合法权益（例如，通过辱骂、殴打等行为），赠与人有权撤销赠与并要求返还赠与物。
- 具体到本题：虽然单纯的辱骂行为可能不足以直接构成“严重侵害”，但如果辱骂行为极其恶劣，对赠与人造成了严重的精神损害，或者构成了对赠与人名誉权的严重侵犯，赠与人可以尝试以此为由主张撤销赠与。不过，这一点的适用需要具体案件具体分析，且通常需要一定的证据支持。
受赠人对赠与人有扶养义务而不履行：
- 如果受赠人对赠与人负有扶养义务（例如，子女对父母负有赡养义务），而受赠人不履行该义务，赠与人有权撤销赠与并要求返还赠与物。
- 举例：若你赠与子女一笔钱，并约定其需用此款赡养你，但子女未履行赡养义务，则你可主张撤销赠与。
受赠人行为导致赠与人死亡或丧失民事行为能力，且赠与人的继承人或法定代理人不知情或不同意：
- 在这种情况下，赠与人的继承人或法定代理人有权撤销赠与并要求返还赠与物。不过，这一点与本题的情况不符，因此不作详细展开。
三、建议与注意事项
收集证据：
- 如果你打算主张撤销赠与并要求返还，建议尽可能收集相关证据（例如，辱骂的录音、聊天记录等），以证明受赠人的行为构成了对赠与人合法权益的严重侵害。
咨询专业律师：
- 由于法律问题的复杂性和个体差异性，建议在采取任何法律行动前咨询专业律师。我可以为你提供合同纠纷、侵权纠纷领域的专业法律咨询，帮助你更好地理解和维护自己的权益。
考虑和解或调解：
- 在某些情况下，通过和解或调解的方式解决纠纷可能更为高效和成本效益。你可以考虑与受赠人进行协商，寻求双方都能接受的解决方案。