关于你提到的手机租金违约金给了对方之后，对方又要求退回的情况，我们可以从以下几个方面来分析和处理：

1. 核查合同条款：

   • 首先，你需要仔细查看租赁合同中关于违约金的条款。明确合同中是否规定了违约金的具体数额、支付条件以及支付后是否可退还等细节。
   • 如果合同中明确规定违约金一旦支付即不可退还，那么对方要求退回是没有合同依据的。

2. 沟通协商：

   • 在确认合同条款后，建议与对方进行友好沟通，了解对方要求退回违约金的具体原因。
   • 如果对方是因为误解或其他原因提出退回要求，你可以根据合同条款向对方解释，并表明违约金支付后的不可退还性。

3. 法律途径：

   • 如果沟通无果，且对方坚持要求退回违约金，你可以考虑通过法律途径来维护自己的权益。
   • 你可以向对方发送一封正式的法律函件，明确表明你的立场和依据，并警告对方如果继续无理要求，你将采取进一步的法律措施。
   • 在必要时，你也可以考虑向法院提起诉讼，通过法律程序来解决争议。

4. 保留证据：

   • 在整个过程中，务必保留好所有相关的证据，包括租赁合同、支付凭证、沟通记录等。
   • 这些证据在后续的法律程序中可能起到关键作用，帮助你证明自己的权益。

综上所述，面对对方要求退回手机租金违约金的情况，你应首先核查合同条款，明确违约金的支付和退还规定。然后，通过沟通协商来尝试解决问题。如果沟通无果，可以考虑通过法律途径来维护自己的权益，并务必保留好所有相关的证据。如果你在这个过程中有任何疑问或需要进一步的法律帮助，请随时向我咨询。