别人送的钱退回去了，一般情况下不算违法行为。不过，这个问题需要从多个角度来具体分析，以下是一些详细的情况说明：

1. 无违法意图的退回：

   • 如果赠送方是出于好意、礼节或庆祝等合法目的赠送钱财，而接收方因为各种原因（如觉得不合适、不想接受等）选择退回，且双方都没有违法意图，那么这种退回行为是完全合法的，不构成任何违法行为。

2. 涉及违法行为的退回：

   • 如果赠送的钱财是非法所得（如贪污、受贿、盗窃等），或者赠送行为本身就违反了法律法规（如行贿、洗钱等），那么即使接收方选择退回，也不能完全免除其可能涉及的法律责任。不过，在这种情况下，退回行为本身通常不会被视为违法行为，但接收方可能需要就其与赠送方之间的其他违法行为承担责任。
   • 特别地，如果接收方在明知赠送的钱财是非法所得或赠送行为违法的情况下，仍然选择接受并随后退回，这可能构成对违法行为的掩饰、隐瞒或参与，从而可能面临法律责任。但这种情况下的法律责任主要针对的是接收方对违法行为的参与程度，而非单纯的退回行为。

3. 民事纠纷中的退回：

   • 在民事纠纷中，如果赠送的钱财是基于某种合同或协议（如借款、赠与合同等）而给予的，且接收方因故需要退回，那么只要退回行为符合合同或协议的规定，且没有违反法律法规的强制性规定，就是合法的。
   • 如果合同或协议中没有明确规定退回的条件和方式，或者双方对退回存在争议，那么可能需要通过法律途径（如诉讼、仲裁等）来解决。但无论如何，单纯的退回行为本身通常不会被视为违法行为。

法律建议：

• 在处理涉及钱财赠送和退回的问题时，建议双方保持沟通，明确各自的权利和义务。
• 如果赠送的钱财数额较大或涉及复杂情况（如涉及非法所得、合同纠纷等），建议咨询专业律师以获取更具体的法律建议。
• 在任何情况下，都应遵守法律法规的强制性规定，避免涉及违法行为。

可能法律后果：

• 如果退回行为本身合法且没有涉及其他违法行为，那么通常不会面临任何法律后果。
• 如果退回行为涉及违法行为或违反了合同或协议的规定，那么可能面临法律责任，包括但不限于民事赔偿、行政处罚甚至刑事责任。

总之，别人送的钱退回去了，在大多数情况下是不算违法行为的。但具体是否违法还需根据赠送和退回的具体情况、双方意图以及相关法律法规来判断。如果有任何疑问或需要进一步的法律建议，请直接向我咨询。