行贿者在纪委阶段确实有可能被要求退还违法所得。以下是从不同角度对此问题的详细分析：

一、纪委调查阶段的权力与职责

纪委在调查职务犯罪案件时，拥有广泛的调查权力和职责。这包括对涉嫌违法违纪的公职人员进行调查、询问、查封、扣押等措施。在调查过程中，如果纪委发现行贿者存在违法所得，如通过行贿获得的非法利益或财产，纪委有权要求行贿者退还这些违法所得。这是纪委履行职责、维护党纪国法的重要体现。

二、退还违法所得的法律依据

1. 党纪规定：根据党的纪律规定，行贿行为是严重违反党纪的行为。对于行贿者，除了给予党纪处分外，还可能要求其退还通过行贿获得的非法利益。这是对行贿行为的一种经济制裁，也是对其违法行为的纠正。

2. 法律规定：在刑事法律层面，行贿行为同样受到严厉打击。根据《中华人民共和国刑法》的相关规定，行贿者可能面临刑事处罚。同时，在刑事诉讼过程中，如果行贿者通过行贿获得了非法利益，法院在判决时可能会要求其退还这些违法所得。虽然纪委阶段并非刑事诉讼阶段，但纪委在调查过程中发现的违法所得问题，往往会与后续的刑事诉讼相衔接。

三、退还违法所得的实践情况

在纪委调查实践中，要求行贿者退还违法所得是一种常见的做法。这有助于削弱行贿者的经济基础，降低其再次行贿的可能性，同时也有助于维护社会的公平正义和法治秩序。当然，具体是否要求退还以及退还的金额和方式等，会根据案件的具体情况和纪委的调查结果来决定。

四、行贿者的权利与义务

对于行贿者而言，在纪委阶段被要求退还违法所得时，应当积极配合纪委的调查工作，如实说明情况，并按照要求退还违法所得。这是行贿者应当履行的法律义务。同时，行贿者也有权在退还违法所得的过程中，提出自己的意见和申诉，但应当通过合法途径进行。

五、后续法律程序的影响

如果行贿者在纪委阶段被要求退还违法所得，并且积极配合退还，这可能会对其在后续的法律程序（如刑事诉讼）中的处理产生一定影响。例如，法院在判决时可能会考虑其退赃情节，从而在量刑上给予一定的从宽处理。但具体影响程度还需根据案件的具体情况和法律规定来判断。

建议：如果您或您身边的人涉及此类问题，建议积极配合纪委的调查工作，并咨询专业律师以获取更具体的法律建议。作为专注于刑事辩护的律师，我能够为您提供专业的法律帮助和指导。