结论：过三个月才找到行贿人退回行贿金，这一行为本身是否违法，需结合具体情境来判断，但退回行贿金的行为本身并不直接构成违法，关键在于行贿行为本身是否违法以及是否已构成犯罪。以下从不同角度进行分析：
一、行贿行为本身的违法性
行贿罪的构成：
- 根据《中华人民共和国刑法》第三百八十九条，为谋取不正当利益，给予国家工作人员以财物的，是行贿罪。在经济往来中，违反国家规定，给予国家工作人员以财物，数额较大的，或者违反国家规定，给予国家工作人员以各种名义的回扣、手续费的，以行贿论处。
- 若行贿行为已经构成犯罪，即行贿人已实施了给予国家工作人员财物的行为，且目的是为了谋取不正当利益，那么行贿行为本身就已经违法，无论后续是否退回行贿金。
退回行贿金的影响：
- 退回行贿金并不能改变行贿行为已经违法的事实。行贿罪的成立并不以行贿金是否被退回为要件，而是以行贿行为的实施和目的为判断标准。
- 然而，退回行贿金可能作为量刑时的考虑因素之一，表明行贿人有一定的悔罪表现，但并不能免除其行贿罪的刑事责任。
二、退回行贿金的时间因素
时间因素对违法性的影响：
- 退回行贿金的时间早晚，并不直接影响行贿行为的违法性。无论行贿后立即退回还是过一段时间退回，行贿行为本身已经构成违法。
- 但时间因素可能影响行贿人的量刑。如果行贿人在行贿后很快意识到错误并主动退回行贿金，可能被视为悔罪表现较好，从而在量刑时得到一定程度的从轻处理。
特殊情况下的考虑：
- 如果行贿人在行贿后因客观原因（如无法联系到行贿对象、行贿对象拒绝接受退回等）而未能及时退回行贿金，但事后积极采取措施退回的，也可能在量刑时得到一定程度的考虑。
- 然而，如果行贿人故意拖延退回时间，或者利用退回行贿金的时间差进行其他违法活动，那么这种行为可能进一步加重其刑事责任。
三、法律建议
对于行贿人：
- 如果已经实施了行贿行为，应尽快认识到错误并主动退回行贿金，同时向相关部门自首，以争取从轻处理。
- 避免利用退回行贿金的时间差进行其他违法活动，以免加重刑事责任。
对于受贿人：
- 如果收到行贿金，应立即拒绝并上报相关部门，避免构成受贿罪。
- 如果已经收受行贿金并构成受贿罪，应尽快退还并自首，以争取从轻处理。
进一步思考：在实际操作中，行贿和受贿行为往往涉及复杂的法律关系和证据收集问题。因此，如果涉及此类案件，建议尽快咨询专业律师，以便更准确地评估法律风险和制定应对策略。如果你有具体的法律问题或需要进一步的法律帮助，可以直接向我咨询。