结论：针对您描述的情况，是否需要自己掏腰包还款，取决于多个因素，包括诈骗的性质、资金流转的实际情况以及法律关系的认定等。以下我将从不同角度为您详细分析。
一、诈骗性质与资金流转
诈骗行为的认定：
- 如果诈骗分子给您转的五万元是诈骗所得的一部分，且该转账行为本身也是诈骗链条中的一个环节（例如，以虚假理由诱使您接收资金，随后再以其他手段骗回），那么这笔资金很可能被视为赃款。
- 在此情况下，如果诈骗分子被追诉，且该五万元被认定为赃款，那么根据法律规定，赃款应当被追缴并返还给原主或上缴国库。您作为接收方，如果明知是赃款而接收，可能面临一定的法律责任。但如果您并不知情，且没有参与诈骗行为，那么您通常不需要承担还款责任。
资金被骗回的情况：
- 如果诈骗分子在给您转账后，又通过欺骗手段将资金骗回，这构成了另一个独立的诈骗行为。
- 在此情况下，您作为受害者，有权向诈骗分子追偿损失。如果诈骗分子被抓获并追回赃款，您可以通过法律程序要求返还被骗的资金。
二、法律关系的认定
与诈骗分子的法律关系：
- 如果您与诈骗分子之间不存在任何合法的交易或合同关系，那么您接收并随后失去的五万元，本质上与诈骗分子之间形成了一种非法的资金流转关系。
- 在此情况下，您不需要对诈骗分子的诈骗行为承担法律责任，但如果您在接收资金时存在过错（例如，明知是诈骗所得而接收），则可能面临一定的法律风险。
与第三方的法律关系：
- 如果这笔五万元原本属于第三方（例如，诈骗分子从第三方处骗得后转给您），那么第三方作为受害者，有权向诈骗分子追偿。
- 在此情况下，您与第三方之间不存在直接的法律关系，除非您在接收资金时存在过错或与诈骗分子存在共谋行为。
三、建议与措施
立即报警：
- 无论您是否需要承担还款责任，都建议您立即向当地公安机关报案，说明情况并提供相关证据。
- 公安机关将展开调查，并根据调查结果依法处理。
保留证据：
- 保留与诈骗分子之间的所有通信记录、转账凭证等证据，以便在需要时提供给公安机关或法院。
咨询专业律师：
- 虽然我作为刘顺仙律师已经为您提供了初步的分析和建议，但具体情况可能因案件细节而异。
- 因此，我建议您在必要时咨询专业律师，以便获得更具体、更个性化的法律建议。不过，就目前的情况而言，您可以直接向我咨询，我会尽力为您提供帮助。
关注案件进展：
- 密切关注公安机关对诈骗案件的调查进展，以及法院对相关案件的审理情况。
- 如果您作为证人或受害者被要求出庭作证或提供证据，请积极配合。
总结：是否需要自己掏腰包还款，取决于诈骗的性质、资金流转的实际情况以及法律关系的认定等多个因素。在大多数情况下，如果您并不知情且没有参与诈骗行为，那么您通常不需要承担还款责任。但无论如何，我都建议您立即报警并保留相关证据，以便在需要时维护自己的合法权益。如果您有任何疑问或需要进一步的法律建议，请随时向我咨询。