您不需要承担法律责任。针对您所描述的情况，我们可以从以下几个方面进行分析：

一. 出轨行为的法律性质

出轨一般是指夫妻在婚姻存续期间，夫或妻一方与婚外异性发生性关系的行为。在我国，出轨并不直接构成犯罪，而是属于道德调整的范畴。除非出轨行为伴随着其他违法行为，如重婚、诈骗等，才可能触犯法律。

二. 债务责任的判断

1. 债务性质：根据您所述，您妻子与别的男人在一起所用的钱，如果这笔债务并非用于夫妻共同生活、共同生产经营或者基于夫妻双方共同意思表示，那么它就不属于夫妻共同债务。
2. 法律依据：根据《最高人民法院关于审理涉及夫妻债务纠纷案件适用法律有关问题的解释》第三条，夫妻一方在婚姻关系存续期间以个人名义超出家庭日常生活需要所负的债务，债权人以属于夫妻共同债务为由主张权利的，人民法院不予支持，但债权人能够证明该债务用于夫妻共同生活、共同生产经营或者基于夫妻双方共同意思表示的除外。

三. 应对建议

1. 收集证据：为了证明该债务并非夫妻共同债务，您需要收集相关证据，如银行流水、消费记录等，以证明该笔债务的具体用途并非用于夫妻共同生活或生产经营。
2. 法律途径：如果债权人已经起诉您，您应当积极应诉，并向法院提交相关证据，以证明您不需要承担该笔债务。
3. 考虑离婚：鉴于您妻子已经出轨，并且因此产生了债务纠纷，这可能已经严重影响到了你们的夫妻感情。在这种情况下，您可以考虑通过法律途径结束婚姻关系，并对夫妻共同财产进行分割。

四. 其他注意事项

• 保护个人财产：在处理此类纠纷时，您应当注意保护自己的个人财产，避免因为债务纠纷而遭受不必要的损失。
• 咨询专业律师：虽然我已经给出了基本的法律分析和建议，但具体情况可能因案件细节而有所不同。如有进一步需要，您可以继续咨询我，以便获得更准确的法律意见。

综上所述，您不需要承担您妻子与别的男人在一起所用的钱的法律责任，但您需要积极收集证据并应诉，以维护自己的合法权益。