针对您提出的问题，即“出轨后要起诉离婚，对方问我要回钱怎么办”，我首先明确一下核心前提：您目前处于婚姻关系中，且存在出轨行为，现在打算起诉离婚，而对方则提出要回之前给予您的钱款。

接下来，我将从几个角度为您分析这个问题：

1. 关于出轨与离婚：

   • 出轨行为本身并不直接决定离婚财产的分割或对方是否有权要回钱款。离婚时，财产的分割主要依据《婚姻法》或相关地区的婚姻家庭法律，通常考虑的是夫妻共同财产、个人财产以及婚姻期间的贡献等因素。
   • 如果您打算起诉离婚，需要准备充分的证据来支持您的诉求，比如婚姻破裂的证据、财产状况的证据等。

2. 关于对方要回钱款：

   • 对方是否有权要回之前给予您的钱款，主要取决于这些钱款的性质以及双方是否有明确的约定。
   • 如果这些钱款是作为婚姻期间的共同生活费用、赠与或基于其他合法原因给予的，且没有明确的返还约定，那么对方通常无权要求返还。
   • 如果这些钱款是作为借款、彩礼（在特定情况下）或其他有明确返还约定的形式给予的，那么对方可能有权要求返还。

3. 建议与应对：

   • 首先，您需要梳理清楚这些钱款的性质和来源，以及双方是否有明确的约定。
   • 其次，您可以与对方进行沟通，了解对方的具体诉求和依据，尝试通过协商解决问题。
   • 如果协商无果，您可以考虑寻求法律帮助，通过法律途径来维护自己的权益。在准备起诉或应诉时，务必准备充分的证据来支持自己的主张。

4. 注意事项：

   • 在处理这类问题时，务必保持冷静和理性，避免情绪化的决策。
   • 尊重法律程序，不要采取任何违法或不当的行为来解决问题。

最后，我想强调的是，每个案件都有其独特性和复杂性，因此我的分析只能提供一般性的指导和建议。如果您有具体的法律问题或需要更详细的法律分析，请随时向我咨询。我会根据您的具体情况，为您提供更专业、更具体的法律建议。