结论：在合同诈骗退了一部分钱后，剩下的钱签了协议但到期仍不还或没钱还，这种情况是否还构成诈骗，需结合具体情况判断，一般不直接认定为诈骗，但可能涉及违约或其他法律责任。
一、是否构成诈骗的判断
诈骗的构成要件：
- 诈骗罪要求行为人以非法占有为目的，通过虚构事实或隐瞒真相的方法，骗取数额较大的公私财物。
- 在您描述的情况中，如果行为人最初确实存在诈骗行为，但已经退还了一部分钱，并就剩余款项签订了还款协议，这通常表明行为人有一定的还款意愿，而非完全以非法占有为目的。
签订协议后的行为性质：
- 签订还款协议后，如果行为人到期不还或没钱还，这更多体现为违约行为，而非直接的诈骗行为。
- 除非有证据表明行为人在签订协议时就没有还款的意图，或者故意隐瞒了无法还款的事实，否则一般不直接认定为诈骗。
二、可能涉及的法律责任
违约责任：
- 如果行为人到期不还或没钱还，这构成对还款协议的违约。
- 您可以依据协议向行为人主张违约责任，包括要求其继续履行还款义务、支付违约金或赔偿损失等。
民事诉讼途径：
- 您可以向法院提起民事诉讼，要求行为人履行还款义务。
- 法院会根据双方提供的证据和法律规定，作出相应的判决。
刑事责任的可能性：
- 如果在签订协议时，行为人就有非法占有的目的，或者故意隐瞒了无法还款的事实，且数额较大，那么可能构成诈骗罪。
- 但这种情况需要充分的证据支持，且通常需要通过刑事诉讼程序来认定。
三、建议与措施
收集证据：
- 保留好与行为人之间的所有沟通记录、转账凭证、还款协议等证据。
- 这些证据在后续的民事诉讼或刑事诉讼中都将起到关键作用。
咨询专业律师：
- 虽然我已经在这里为您提供了一些法律分析，但每个案件的具体情况都有所不同。
- 您可以进一步向我咨询，我会根据您的具体情况提供更详细的法律建议。
考虑法律途径：
- 如果行为人确实存在违约行为，且您希望通过法律途径来维护自己的权益，那么可以考虑向法院提起民事诉讼。
- 如果怀疑行为人构成诈骗罪，且证据充分，那么可以向公安机关报案。
总结：在合同诈骗退了一部分钱后，剩下的钱签了协议但到期仍不还或没钱还，这种情况一般不直接认定为诈骗，但可能涉及违约或其他法律责任。建议您收集好相关证据，并考虑通过法律途径来维护自己的权益。如果有任何疑问或需要进一步的法律帮助，请随时向我咨询。