结论：客户给过钱但很早前又退了，是否算受贿，不能一概而论，需要结合具体情形来判断。以下从不同角度进行分析：
从受贿罪的构成要件角度分析
- 受贿罪的基本构成：根据我国《刑法》及相关司法解释，受贿罪通常要求国家工作人员利用职务上的便利，索取他人财物，或者非法收受他人财物，为他人谋取利益。这里的关键在于“收受”和“为他人谋取利益”。
- 退款的影响：如果国家工作人员在收受财物后，很快意识到问题并主动退还，且没有为对方谋取利益，或者虽然谋取了利益但退款行为发生在谋取利益之前，那么这种退款行为可能表明其没有受贿的故意，或者及时纠正了错误，因此不构成受贿罪。
- 例外情况：然而，如果退款行为发生在为对方谋取利益之后，且退款并非出于真心悔过或纠正错误，而是出于其他目的（如逃避法律追究），那么这种退款行为可能不影响受贿罪的成立。此外，如果退款时对方已经遭受了损失，或者退款行为并未完全消除受贿行为的影响，也可能构成受贿罪。
从退款的时间点和主观意图角度分析
- 退款时间点：退款的时间点是一个重要的考量因素。如果退款发生在收受财物后不久，且没有为对方谋取利益，那么更可能被视为没有受贿的故意。相反，如果退款发生在长时间后，或者已经为对方谋取了利益，那么退款行为可能不足以消除受贿的嫌疑。
- 主观意图：退款时的主观意图也是关键。如果退款是出于真心悔过、纠正错误或避免法律追究的考虑，那么更可能被视为没有受贿的故意。但如果退款是出于其他不正当目的（如掩盖受贿事实、逃避法律制裁等），那么退款行为可能不影响受贿罪的认定。
从司法实践的角度分析
- 司法实践中的考量：在司法实践中，法院会综合考虑多种因素来判断退款行为是否影响受贿罪的成立。这些因素包括退款的时间点、退款的原因、退款时的主观意图、是否为对方谋取了利益等。
- 类似案例：可以参考一些类似的司法案例。在这些案例中，法院会根据具体事实和法律规定来判定退款行为是否构成受贿罪的免责事由。例如，如果退款行为发生在受贿行为实施后不久，且没有为对方谋取利益，法院可能会认定不构成受贿罪；但如果退款行为发生在长时间后，且已经为对方谋取了利益，法院则可能会认定构成受贿罪。
建议：
- 如果您或您身边的人遇到了类似的情况，建议尽快咨询专业律师，以便更准确地评估法律风险。
- 在处理此类事务时，务必保留好相关证据（如退款记录、沟通记录等），以便在需要时提供证明。
- 遵守法律法规，避免利用职务之便谋取不正当利益，是预防此类法律风险的最佳方式。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。