结论概述：

1. 若您对赃款不知情，且违约金与赃款无直接关联，通常无需退回违约金。
2. 若您对赃款知情或应知情，或者违约金与赃款有直接关联，可能需要退回违约金，甚至面临法律风险。

详细分析：

首先，我们需要明确几个关键点：一是您对赃款是否知情；二是违约金与赃款之间是否存在直接关联；三是相关法律法规对此类情况的规定。

1. 对赃款不知情的情况：

   • 如果您在出售房屋时，对买方使用的资金是赃款并不知情，且您已经按照合同约定履行了出售房屋的义务，那么您收取的违约金是基于合同违约而获得的合法补偿。
   • 在这种情况下，违约金与赃款无直接关联，您无需因为买方使用赃款而退回违约金。当然，如果后续发现买方使用赃款，且该行为导致合同无效或被撤销，那么您可能需要根据具体情况退还房屋或接受其他法律后果，但这与违约金是否退回是两个不同的问题。

2. 对赃款知情或应知情的情况：

   • 如果您在出售房屋时，对买方使用的资金是赃款知情或应当知情（例如，买方以明显低于市场价的价格购买，或您通过其他途径得知买方资金来源可疑），那么您收取违约金的行为可能构成对非法所得的接受或协助转移。
   • 在这种情况下，违约金可能与赃款有直接关联，您可能需要根据法律法规的规定退回违约金，甚至可能面临法律风险，如被要求协助调查、承担连带责任等。

3. 相关法律法规的规定：

   • 根据《中华人民共和国刑法》及相关司法解释，明知是犯罪所得及其产生的收益而予以窝藏、转移、收购、代为销售或者以其他方法掩饰、隐瞒的，构成掩饰、隐瞒犯罪所得、犯罪所得收益罪。
   • 如果您被认定为对赃款知情或应当知情，并收取了与赃款直接关联的违约金，那么您的行为可能触犯上述法律条款，需要承担相应的法律责任。

建议与行动：

• 如果您对买方使用赃款并不知情，且已经按照合同约定履行了义务，那么您可以保留违约金，无需退回。但建议您保留相关证据，以备不时之需。
• 如果您对买方使用赃款知情或应当知情，或者违约金与赃款有直接关联，那么建议您尽快咨询专业律师，了解您的法律责任和可能的法律后果，并根据律师的建议采取相应行动。
• 在未来的房屋买卖交易中，建议您加强尽职调查，了解买方的资金来源和信誉情况，以避免类似风险的发生。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。