结论：在双方签字借钱的情况下，若单方面使用了借款，还款责任通常仍由借款方承担，但具体责任分配需根据借款合同的具体条款、借款用途以及是否存在违约行为等因素综合判断。以下从不同角度进行详细分析：
借款合同的基本原则：
- 借款合同是双方意思表示一致的产物，一旦成立，即对双方产生法律约束力。借款方有义务按照合同约定的用途和期限使用借款，并按时还款。
- 若借款合同中明确规定了借款用途，且借款方未按照约定用途使用借款，这可能构成违约行为。然而，违约行为本身并不直接改变还款责任主体，但可能影响违约责任的承担方式，如支付违约金、赔偿损失等。
单方面使用借款的情况：
- 如果借款方单方面改变了借款用途，但并未违反法律法规的强制性规定，且出借方在借款时或借款后未对此提出异议，那么还款责任仍然由借款方承担。
- 如果借款方单方面使用借款的行为违反了法律法规的强制性规定（如将借款用于非法活动），或者出借方在借款时或借款后明确表示反对并要求提前还款，那么借款方可能需要承担更严重的法律责任，包括但不限于提前还款、支付违约金等。
出借方的权利与救济：
- 出借方有权要求借款方按照合同约定的用途和期限使用借款，并按时还款。
- 如果借款方违反合同约定，出借方可以采取多种救济措施，如要求借款方立即还款、支付违约金、赔偿损失等。在极端情况下，出借方还可以通过法律途径（如起诉）来维护自己的合法权益。
实际操作建议：
- 对于借款方而言，应严格遵守借款合同的约定，按照约定的用途和期限使用借款，并按时还款。如果确实需要改变借款用途，应提前与出借方协商并取得其同意。
- 对于出借方而言，应在借款前对借款方的信用状况、还款能力等进行充分评估，并在借款合同中明确约定借款用途、还款期限、违约责任等条款。在借款后，应密切关注借款方的资金使用情况，一旦发现违约行为，应及时采取措施维护自己的合法权益。
特殊情况说明：如果借款合同中存在特别约定（如借款方单方面改变借款用途时，出借方有权要求提前还款或承担其他责任），则应按照特别约定执行。此外，如果借款行为涉及第三方（如担保人），则还款责任和违约责任的承担方式可能更加复杂，需要根据具体情况进行判断。
后续行动建议：如果您或他人遇到类似问题，建议首先仔细审查借款合同的具体条款，了解双方的权利和义务。如有必要，可以咨询专业律师以获取更具体的法律建议。如果您有具体的法律问题或需要进一步的法律帮助，请直接向我咨询。