当您的银行卡收到五百元被判定为黑钱，且公安机关要求您退回时，您应当积极配合并遵循以下步骤：

一、确认钱款性质与退回要求

首先，要明确这笔五百元确实被公安机关认定为非法来源的资金（即黑钱）。一旦确认，公安机关的要求退回是合法的执法行为，您有法律责任配合执行。

二、及时退回钱款

1. 与公安机关沟通：了解具体的退款方式和退款期限，确保按照要求操作。
2. 执行退款：通过银行转账、现金交付或其他公安机关指定的方式，将五百元及时退回。

三、配合调查与说明情况

1. 提供信息：在退款过程中或退款后，您可能需要向公安机关提供关于这笔钱款的相关信息，如资金来源、收款原因、是否存在被欺骗等特殊情况。
2. 如实陈述：务必如实陈述事实，不要隐瞒或歪曲信息，以免给自己带来不必要的法律麻烦。

四、关注后续处理

1. 了解处理结果：在退回钱款并配合调查后，您可以向公安机关咨询后续的处理结果，了解自己是否还需要承担其他责任。
2. 保留证据：在整个过程中，建议您保留好所有与退款和配合调查相关的证据，如退款凭证、通讯记录等，以备不时之需。

五、特殊情况处理

如果您在这件事情中也是受害者，例如因被诈骗而接收了这笔黑钱，务必及时向公安机关说明情况。这可能会影响最终对您的处理结果，有助于减轻或免除您的责任。

综上所述，当您的银行卡收到黑钱并被公安机关要求退回时，应积极配合、及时退款，并如实提供相关信息。同时，关注后续处理结果并保留好相关证据，以确保自己的合法权益得到保障。