结论是：高利贷借款5000元，即便已经还了2475元，若剩余款项不还，确实有可能会面临催收。以下从不同角度为你详细分析：

一、高利贷的法律界定与催收合法性

首先，我们需要明确高利贷的法律界定。根据《最高人民法院关于审理民间借贷案件适用法律若干问题的规定》，借贷双方约定的利率超过合同成立时一年期贷款市场报价利率四倍的，超出部分的利息不受法律保护。这意味着，如果高利贷的利率超过了法定上限，那么超出部分的利息是无效的，借款人无需偿还。

然而，这并不意味着借款人可以完全不还剩余款项。对于未超过法定利率上限的部分，借款人仍然有义务偿还。如果借款人未按时偿还，出借人有权通过合法途径进行催收，包括但不限于电话催收、上门催收或通过法律途径追讨。

二、催收行为的合法性与限制

催收行为本身并不违法，但必须遵守相关法律法规。出借人在催收过程中，不得使用暴力、威胁、恐吓等非法手段。如果出借人采取非法手段进行催收，借款人可以向公安机关报案，维护自己的合法权益。

同时，借款人也有权拒绝出借人的非法催收行为。如果出借人通过非法手段进行催收，借款人可以保留相关证据，如录音、录像等，以便在必要时维护自己的权益。

三、不还款可能面临的法律后果

1. 信用受损：不还款会导致借款人的信用记录受损，影响其未来的借贷能力。在信用体系日益完善的今天，信用记录的重要性不言而喻。

2. 法律诉讼：如果出借人选择通过法律途径追讨债务，借款人可能会面临法律诉讼。在诉讼过程中，如果法院判决借款人偿还债务，而借款人拒不履行，法院可能会采取强制执行措施，如查封、扣押、拍卖借款人的财产等。

3. 额外费用：在法律诉讼过程中，借款人可能需要承担额外的费用，如诉讼费、律师费等。这些费用会进一步增加借款人的经济负担。

四、建议与应对措施

1. 与出借人协商：如果借款人确实无法按时偿还债务，可以尝试与出借人协商，寻求延期还款或分期还款的方案。这有助于减轻借款人的经济压力，同时避免不必要的法律纠纷。

2. 寻求法律援助：如果借款人面临非法催收行为或法律诉讼，可以寻求法律援助，咨询专业律师的意见。律师可以为借款人提供法律支持，帮助其维护合法权益。

3. 保留证据：在催收过程中，借款人应保留相关证据，如录音、录像、短信等。这些证据有助于证明出借人的催收行为是否合法，以及借款人在催收过程中的权益是否受到侵害。

作为李丹丹律师，我建议你如果面临高利贷催收问题，务必保持冷静，通过合法途径解决问题。如果你有任何法律问题或需要进一步的法律建议，可以直接向我咨询。