结论概述：给小三转账的钱已全部退回，这一行为本身通常不直接构成违法，但需根据具体情况判断转账行为的原始性质及退款后的法律后果。以下从不同角度进行详细分析。
一、转账行为原始性质的法律分析
若转账行为构成赠与：
- 法律性质：赠与是赠与人将自己的财产无偿给予受赠人，受赠人表示接受的一种行为。在婚姻关系中，若一方未经另一方同意，擅自将夫妻共同财产赠与第三者，这种赠与行为可能因违反公序良俗和侵犯配偶的财产权益而被认定为无效。
- 退款影响：即使钱款已全部退回，若原赠与行为被认定为无效，退款行为只是恢复了原状，但赠与行为的无效性本身可能引发其他法律后果，如配偶方可能要求确认赠与无效并主张返还财产（尽管在此情况下财产已返还）。
若转账行为构成借贷：
- 法律性质：借贷是借款人向贷款人借款，到期返还借款并支付利息的行为。若转账行为被认定为借贷，则退款行为即履行了还款义务。
- 退款影响：在此情况下，退款行为是合法的，且不会引发法律纠纷，因为借贷关系已因还款而消灭。
若转账行为涉及其他法律关系：
- 如转账行为涉及不当得利、侵占等法律关系，退款行为可能是履行返还义务或纠正不当行为的一部分。
- 退款影响：退款行为本身可能是合法的，但需根据具体法律关系判断是否完全履行了法律义务，以及是否可能引发其他法律后果。
二、退款后可能涉及的法律后果
婚姻关系内的财产分割：
- 若转账行为发生在婚姻关系存续期间，且涉及夫妻共同财产，退款行为可能影响夫妻财产的分割。配偶方可能主张因对方擅自处分共同财产而要求多分财产或进行其他补偿。
道德和名誉影响：
- 尽管退款行为本身不直接构成违法，但给小三转账的行为可能违反社会道德和公序良俗，对个人名誉和婚姻关系造成损害。
潜在的法律纠纷：
- 若退款行为涉及复杂的法律关系或存在争议，如转账金额、转账目的、退款方式等，可能引发法律纠纷。例如，若退款不完全或存在争议，可能涉及诉讼或仲裁等法律程序。
三、建议与注意事项
保留证据：
- 在处理此类问题时，建议保留所有与转账和退款相关的证据，如转账记录、聊天记录、退款凭证等。这些证据在可能发生的法律纠纷中至关重要。
咨询专业律师：
- 由于此类问题涉及复杂的法律关系和可能的法律后果，建议咨询专业律师以获取具体的法律建议和指导。律师可以根据具体情况分析法律风险，并提供合适的解决方案。
遵守法律法规和道德规范：
- 在处理婚姻关系和财产问题时，应遵守法律法规和道德规范，尊重配偶的权益和感受，避免采取不当行为引发法律纠纷和道德争议。
总结来说，给小三转账的钱已全部退回，这一行为本身通常不直接构成违法，但需根据转账行为的原始性质及退款后的法律后果进行具体判断。在处理此类问题时，建议保留证据、咨询专业律师并遵守法律法规和道德规范。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。