结论：夫妻双方签署了贷款协议但还没开始贷，一方能否取消该协议，需视协议的具体内容、签署时的真实意思表示以及是否存在法定或约定的解除情形而定。以下从不同角度进行分析：
一、协议内容与真实意思表示
协议内容明确且双方真实意思表示一致：
- 如果贷款协议内容明确，双方在签署时均出于真实意思表示，且没有违反法律、行政法规的强制性规定或公序良俗，那么该协议是有效的。
- 在此情况下，一方不能单方面随意取消协议，除非另一方同意或者存在法定解除情形。
协议内容存在瑕疵或一方意思表示不真实：
- 如果协议内容存在重大误解、显失公平、欺诈、胁迫等情形，或者一方在签署时并非出于真实意思表示，那么受损害方有权请求人民法院或者仲裁机构撤销该协议。
- 撤销后，协议自始无效，双方无需继续履行。
二、法定解除情形
根据《中华人民共和国民法典》的相关规定，合同解除的情形包括：
因不可抗力致使不能实现合同目的：
- 如果因不可抗力（如自然灾害、战争等）导致贷款协议无法履行，双方均可以解除协议。
在履行期限届满前，当事人一方明确表示或者以自己的行为表明不履行主要债务：
- 如果一方在协议签署后、贷款发放前明确表示或以行为表明不履行贷款义务，另一方有权解除协议。
当事人一方迟延履行主要债务，经催告后在合理期限内仍未履行：
- 虽然此情形通常适用于协议已开始履行的情况，但如果一方在签署协议后即表现出迟延履行的迹象，且经催告后仍未履行，另一方也可能有权解除协议（具体需结合协议内容和实际情况判断）。
当事人一方迟延履行债务或者有其他违约行为致使不能实现合同目的：
- 如果一方存在违约行为，且该违约行为导致贷款协议的目的无法实现，另一方有权解除协议。
法律规定的其他情形：
- 除了上述情形外，法律还规定了其他可能导致合同解除的情形，如情势变更等。
三、约定解除情形
- 如果贷款协议中明确约定了解除条件或解除方式，且该约定不违反法律、行政法规的强制性规定或公序良俗，那么当约定条件成就时，一方或双方有权按照约定解除协议。
四、实际操作建议
审查协议内容：
- 首先，仔细审查贷款协议的内容，特别是关于解除协议的条款和条件。
与对方协商：
- 如果一方希望取消协议，建议先与对方进行协商，看是否能够达成一致意见。
寻求法律帮助：
- 如果协商无果，或者对协议内容、解除条件等存在疑问，建议寻求专业律师的帮助，以便更好地维护自己的合法权益。
进一步思考：在签署任何协议前，都应充分了解协议内容、权利义务以及可能存在的风险。如果对协议内容存在疑问或不确定，应及时咨询专业律师或相关机构，以确保自己的合法权益得到保障。如果您有进一步的法律问题或需要更详细的法律建议，请直接向我咨询。