结论：在贷款时只和中介签订了合同，但没有和银行签订贷款合同的情况下，是否可以取消贷款，取决于多个因素，包括合同的具体内容、双方的权利义务、以及是否已经产生了实际的法律后果等。以下是从不同角度进行的分析：
一、合同效力与取消可能性
合同效力：
- 首先，需要审查与中介签订的合同内容，确定其是否具备法律效力的基本要素，如双方的真实意思表示、合同内容的合法性、不违反公序良俗等。
- 如果合同有效，那么双方应受合同条款的约束。但合同的有效性并不直接决定贷款是否可以取消，还需考虑其他因素。
取消可能性：
- 如果与中介的合同中明确约定了取消贷款的条件或程序，且这些条件或程序在法律上合理且可行，那么可以按照合同约定来取消贷款。
- 如果合同中没有明确约定取消贷款的条件或程序，或者约定的条件或程序不合法或不可行，那么取消贷款可能会面临一定的法律障碍。
二、与银行的关系及法律后果
与银行的关系：
- 关键在于是否已经与银行形成了贷款合同关系。如果尚未与银行签订贷款合同，且银行也未实际发放贷款，那么从法律上讲，贷款关系尚未成立，理论上可以取消。
- 但如果已经与银行进行了贷款申请、审批等流程，且银行已经表示同意贷款，只是尚未签订书面合同，那么取消贷款可能会涉及违约责任等问题。
法律后果：
- 如果取消贷款导致银行遭受损失（如已经为贷款做了准备但未能实际发放），银行可能会要求赔偿损失。
- 此外，如果与中介的合同中约定了违约责任或赔偿条款，取消贷款也可能需要承担相应的违约责任。
三、实际操作建议
审查合同：
- 仔细审查与中介签订的合同，了解其中的权利义务、取消贷款的条件或程序等。
与银行沟通：
- 如果尚未与银行签订贷款合同，且希望取消贷款，建议及时与银行沟通，说明情况并询问取消贷款的可能性及后果。
咨询专业意见：
- 如果对合同内容或法律后果存在疑问，建议咨询专业律师或法律机构，以获取更准确的法律意见。
谨慎行事：
- 在取消贷款前，应充分考虑可能产生的法律后果和违约责任，确保自己的决策是谨慎和合理的。
总结与建议：在贷款时只和中介签订了合同但没有和银行签订贷款合同的情况下，是否可以取消贷款取决于多个因素。建议首先审查与中介的合同内容，了解取消贷款的条件或程序；其次与银行沟通，了解取消贷款的可能性及后果；最后在必要时咨询专业律师或法律机构以获取更准确的法律意见。如果有任何疑问或需要进一步的法律帮助，请直接向我咨询。