结论：对方拒不返还赠与的5万元，一般情况下不会因此坐牢，但如果对方的行为构成侵占罪等犯罪行为，且经法院判决有罪，则可能面临刑事处罚。不过，从民事纠纷的角度，您可以通过法律途径追讨这笔款项。

详细分析：

1. 民事纠纷角度：

   • 赠与合同一旦成立并生效，除非存在法定撤销事由（如受赠人严重侵害赠与人或其近亲属的合法权益、对赠与人有扶养义务而不履行等），否则赠与人不能随意撤销赠与并要求返还。但在此案例中，若您能证明赠与并非出于自愿，或者存在其他法定撤销事由，您可以向法院提起诉讼，要求撤销赠与并返还财产。
   • 如果法院最终判决对方应返还这笔款项，而对方有能力偿还却故意不还，这属于拒不履行法院生效判决、裁定的行为。根据《中华人民共和国民事诉讼法》的相关规定，对方可能会面临强制执行措施，如银行账户冻结、财产查封拍卖等，甚至可能被列入失信被执行人名单，影响其信用记录。但单纯的拒不履行民事判决，并不构成犯罪，不会因此坐牢。

2. 刑事犯罪角度：

   • 如果对方的行为构成侵占罪，即以非法占有为目的，将代为保管的他人财物非法占为己有，数额较大且拒不退还，或者将他人的遗忘物或者埋藏物非法占为己有，数额较大，拒不交出的，那么对方可能面临刑事处罚。但侵占罪的成立需要满足一定的条件，且数额较大通常指的是达到一定的标准（具体标准可能因地区而异）。
   • 在此案例中，如果赠与的5万元原本就属于您，且对方以非法占有为目的，通过欺骗、胁迫等手段获取，或者获取后拒不返还，且数额达到当地侵占罪的立案标准，那么您可以向公安机关报案，要求追究对方的刑事责任。如果经法院审理认定对方构成侵占罪，那么对方可能面临有期徒刑、拘役或者罚金等刑事处罚。

建议：

• 首先，您可以尝试与对方协商，看是否能达成和解，要求对方返还赠与的款项。
• 如果协商无果，您可以收集相关证据（如赠与合同、转账记录、聊天记录等），向法院提起民事诉讼，要求撤销赠与并返还财产。
• 如果您认为对方的行为可能构成侵占罪等犯罪行为，且证据充分，您可以向公安机关报案，要求追究对方的刑事责任。

后续行动：

• 在整个过程中，建议您保留好所有相关证据，以便在需要时提供给法院或公安机关。
• 如果您对法律程序不熟悉或感到困惑，可以随时向我咨询，我会根据您的具体情况提供专业的法律建议和帮助。