结论：能否起诉要求“小三”退还购买的衣服，需根据具体情况判断，主要涉及是否构成赠与以及该赠与行为是否有效的问题。以下从不同角度进行分析：
一、若衣服购买行为构成赠与，且赠与有效
赠与行为认定：
- 如果一方（如丈夫）用夫妻共同财产为“小三”购买衣服，且明确表示赠与，那么该行为在法律上可能被认定为赠与。
赠与有效性：
- 赠与行为若发生在婚姻关系存续期间，且使用夫妻共同财产，未经另一方（如妻子）同意，可能因侵犯夫妻共同财产权而无效。根据《中华人民共和国民法典》的相关规定，夫妻对共同财产有平等的处理权，一方非因日常生活需要处分夫妻共同财产时，应当协商一致，任何一方无权单独处分夫妻共同财产。
法律后果：
- 若赠与行为被认定为无效，妻子有权要求“小三”返还衣服或等价财产。这是因为无效的赠与行为自始不具有法律效力，受赠人因该行为取得的财产应当予以返还。
二、若衣服购买行为不构成赠与，或赠与行为有效但存在特殊情况
不构成赠与的情况：
- 如果衣服购买行为并非出于赠与目的，例如是借款、代买或其他法律关系，则不能直接要求“小三”退还衣服。此时，需要依据具体的法律关系来主张权利。
赠与行为有效但存在特殊情况：
- 如果赠与行为虽然有效，但存在欺诈、胁迫等情形，或者赠与财产已经灭失、被转让等，那么要求“小三”退还衣服可能面临困难。此时，需要根据具体情况来评估法律救济的可能性。
三、实际操作建议
收集证据：
- 若妻子打算起诉要求“小三”退还衣服，首先需要收集相关证据，如购买衣服的发票、转账记录、聊天记录等，以证明赠与行为的存在以及使用夫妻共同财产的事实。
咨询律师：
- 由于涉及复杂的法律关系和证据收集，建议妻子在起诉前咨询专业律师，以便更准确地评估案件胜诉的可能性，并制定合适的诉讼策略。
考虑其他法律途径：
- 除了起诉要求退还衣服外，妻子还可以考虑通过离婚诉讼来主张分割夫妻共同财产，并要求对方赔偿因擅自处分夫妻共同财产而造成的损失。
进一步说明：在处理此类案件时，需要综合考虑多种因素，包括赠与行为的性质、夫妻共同财产的处理权、证据的充分性等。因此，建议妻子在采取行动前充分咨询专业律师，以便更好地维护自己的合法权益。如果你有具体的法律问题或需要进一步的法律帮助，请直接向我咨询。