针对您提出的“受贿款由行贿人保管的退赃责任”问题，以下是我的详细解答：

1. 受贿款由行贿人保管时的既遂与未遂认定：

   • 在受贿案件中，若受贿人与行贿人约定由行贿人暂时保管受贿款，判断受贿是否既遂的关键在于受贿人能否实际控制该财物。
   • 若受贿人能够实际控制由行贿人保管的财物（例如，行贿人与受贿人约定随时可以使用、处分财物，且保管方式特殊，便于受贿人随取随用），则一般认定为受贿既遂。
   • 若受贿人无法实际控制该财物，或控制力十分有限且具有较大不确定性，则一般按受贿人实际收受的财物认定为既遂，未实际获得的部分一般认定为未遂。

2. 退赃责任：

   • 在受贿既遂的情况下，受贿人负有退赃的义务。退赃是指将受贿所得的财物及其孳息退还给国家或相关单位，以减轻或消除其犯罪行为的社会危害性。
   • 若受贿款由行贿人保管，且受贿人已实际控制该财物（即构成受贿既遂），则受贿人仍需承担退赃责任，即使该财物目前仍在行贿人手中。受贿人应积极与行贿人沟通，确保受贿款能够顺利退还。
   • 若受贿人未实际控制该财物（即构成受贿未遂），则退赃责任可能相对较轻或不存在。但在此情况下，受贿人仍需配合调查，说明情况，并可能面临其他法律责任。

3. 特殊情况下的退赃责任：

   • 根据“两高”《关于办理受贿刑事案件适用法律若干问题的意见》的精神，国家工作人员受贿后，因自身或者与其受贿有关联的人、事被查处，将已收受的财物交由行贿人保管的，应视为既遂。在此情况下，受贿人仍需承担退赃责任。
   • 若行贿人利用受贿人对其实际保管的数额不知情予以“截贿”，则按行受贿双方约定的数额认定既遂，受贿人仍需按约定数额退赃。

4. 法律建议：

   • 对于涉及受贿款由行贿人保管的案件，受贿人应尽早咨询专业律师，了解自己的法律责任和退赃义务。
   • 受贿人应积极配合调查，如实说明情况，并主动退还受贿所得财物及其孳息，以减轻或消除其犯罪行为的社会危害性。
   • 若受贿人认为存在特殊情况或误解，应及时向律师说明，以便律师能够为其提供更准确的法律建议和辩护策略。

综上所述，受贿款由行贿人保管时的退赃责任取决于受贿人是否实际控制了该财物以及受贿行为的既遂与未遂认定。在任何情况下，受贿人都应积极配合调查，并主动退还受贿所得财物及其孳息。如有任何法律问题或需要进一步的法律建议，请随时向我咨询。