结论前置：不可以不还剩余欠款，否则可能面临法律责任。以下从多个角度进行分析：

一、从合同法的角度

在民间借贷关系中，双方虽然没有签订正式的书面合同，但口头约定以及实际发生的借款、还款行为，已经构成了事实上的借贷合同关系。根据《中华人民共和国民法典》的相关规定，当事人应当按照约定全面履行自己的义务。你欠别人钱，这构成了一个债务关系，你承诺还款，就应当按照约定履行还款义务。你之前已经还了一部分，这是部分履行了债务，但对于剩余的债务，你仍然有继续履行的义务。如果你不还剩余的欠款，就构成了违约行为。债权人有权要求你继续履行还款义务，并且如果因为你的违约行为给债权人造成了损失，你还需要承担赔偿责任。

二、从诉讼的角度

如果债权人选择通过法律途径来追讨剩余的欠款，他可以向法院提起诉讼。在诉讼过程中，债权人需要提供证据证明你们之间存在借贷关系，以及你尚未还清全部欠款的事实。这些证据可以包括转账记录、聊天记录、证人证言等。如果法院认定债权人的主张成立，就会判决你偿还剩余的欠款，并且可能还会要求你承担诉讼费用。如果你在判决生效后仍然不履行还款义务，债权人还可以向法院申请强制执行，法院有权采取多种强制措施来迫使你履行义务，比如冻结你的银行账户、查封你的财产等。

三、从信用记录的角度

在现代社会，个人信用记录越来越重要。如果你因为不还剩余欠款而被债权人起诉，并且法院判决你败诉，这个信息很可能会被记录在你的个人信用报告中。这将对你的信用记录造成负面影响，影响你未来的借贷、购房、购车等金融活动。一些金融机构在审批贷款时，会严格审查借款人的信用记录，如果发现你有不良信用记录，可能会拒绝你的贷款申请或者提高你的贷款利率。

建议：为了避免不必要的法律纠纷和信用损失，我建议你尽快与债权人沟通，协商还款事宜。如果你目前确实没有能力一次性还清剩余的欠款，可以与债权人协商制定一个分期还款计划，并签订书面协议，明确还款的时间、金额等事项。这样既可以体现你的还款诚意，也可以避免因为逾期还款而产生的额外费用和法律风险。如果你在还款过程中遇到任何问题或者需要进一步的法律帮助，可以直接向我咨询。