结论：关于参加活动买衣服工会出钱，现在不参加活动钱是否可以要回去的问题，这主要取决于工会的相关规定以及您与工会之间的具体约定。以下是从不同角度进行的分析：
工会规定与约定：
- 如果工会在组织活动时，有明确的规定或通知说明，对于因个人原因不参加活动而要求退还工会已支付的费用的情况如何处理，那么应当遵循这些规定或通知。
- 如果您与工会之间有书面的或口头的约定，明确了在何种情况下可以退还费用，那么也应当按照这个约定来执行。
无明确规定或约定的情况：
- 在没有明确规定或约定的情况下，工会是否退还费用可能取决于工会的内部决策和实际情况。工会可能会考虑活动的性质、费用的性质（如是否已实际支付给商家）、不参加活动的原因等因素来决定是否退还。
- 从法律角度来看，如果工会已经支付了费用，并且这笔费用已经用于购买衣服等物品，那么在没有明确约定可以退还的情况下，工会可能没有法律义务退还这笔费用。因为工会已经履行了其支付义务，而您作为参与者也享受了工会提供的福利（即购买衣服的机会）。
建议与行动：
- 如果您希望退还费用，首先建议查阅工会的相关规定或通知，了解是否有关于退还费用的具体条款。
- 如果没有相关规定或通知，或者规定不明确，您可以尝试与工会进行沟通，说明您的情况和理由，看是否能够达成退还费用的协议。
- 如果沟通无果，且您认为工会的做法不合理或侵犯了您的权益，您可以考虑向工会的上级组织或相关部门反映情况，寻求帮助或调解。
法律背景：
- 在劳动法律关系中，工会作为职工的代表组织，有权组织各类活动并筹集资金。对于工会活动的费用处理，通常应当遵循工会的章程和规定。
- 如果工会活动涉及职工的个人财产权益（如本例中的购买衣服的费用），那么工会应当尊重职工的意愿和权益，合理处理费用问题。
可能后果：
- 如果工会拒绝退还费用，并且您认为这侵犯了您的权益，您可能会选择通过法律途径来维护自己的权益。然而，这通常需要您提供充分的证据来证明工会的做法是不合理的或违法的。
- 在大多数情况下，通过沟通协商解决问题是最为高效和和谐的方式。因此，建议您首先尝试与工会进行沟通，寻求双方都能接受的解决方案。
如有任何疑问或需要进一步的法律帮助，请随时向我咨询。