结论前置：是否需要给对方钱，主要取决于你们之间的约定或交易性质，以及衣服的实际价值和使用情况。以下从不同角度进行分析：

1. 基于赠与关系的分析：

   • 如果对方明确表示将衣服赠与你，且没有附加任何条件（如要求你支付费用），那么从法律上讲，你无需支付任何费用。赠与行为一旦完成，即产生法律效力，受赠人（你）有权接受并使用赠与物（衣服），而无需承担支付对价的义务。

2. 基于买卖或交换关系的分析：

   • 如果你们之间的行为更接近于买卖或交换，即对方以某种方式（如口头约定）要求你支付费用以换取衣服，那么你需要根据约定支付相应的费用。这种情况下，你们之间的行为构成了一种合同关系，双方都有义务履行各自的承诺。
   • 具体计算与考虑：若涉及金钱支付，支付金额应基于衣服的实际价值、市场价格或你们之间的约定。例如，如果衣服的市场价格为100元，且你们约定你支付此金额以获取衣服，那么你应支付100元。但若衣服对你而言无实际价值（如尺寸完全不合），且对方未提前告知，你可能有权要求减少或免除支付义务。

3. 基于实际使用情况的分析：

   • 即使对方最初可能希望你将衣服视为赠与，但如果你因衣服尺寸问题无法使用，且对方在给予前未充分告知或协商，你可能有权与对方协商解决此事，包括但不限于要求更换合适尺寸的衣服、部分退款或完全免除支付义务。

4. 法律建议与后续行动：

   • 沟通协商：首先，建议与对方进行友好沟通，明确双方对衣服交易的性质和期望。通过协商，你们可以达成一个双方都能接受的解决方案。
   • 保留证据：如果沟通无果，且你认为自己的权益受到侵害，建议保留相关证据（如聊天记录、衣服照片等），以便在必要时维护自己的权益。
   • 法律途径：若对方坚持要求你支付费用，而你认为自己无需支付或应支付较少金额，且协商无果，你可以考虑通过法律途径解决争议。但在此之前，请务必咨询专业律师以获取更具体的法律建议。

总结与提醒：在处理此类问题时，请务必保持冷静和理性，通过友好沟通寻求解决方案。如果问题复杂或涉及较大金额，建议及时咨询专业律师以获取更全面的法律支持和建议。如果你有任何法律问题或需要进一步的帮助，请直接向我咨询。