结论：对方在您欠钱的情况下直接开走您的车，这一行为是否合法，取决于多种因素，一般情况下，未经您同意，对方无权直接开走您的车，这可能构成侵权或违法行为。以下从不同角度为您详细分析：
一、从合同与债权债务角度
若协议中有明确约定：
- 如果您与对方签订的协议中明确约定，在您未按时还款时，对方有权采取某种方式（如开走车辆）来保障其债权，且该约定不违反法律、行政法规的强制性规定，也不违背公序良俗，那么对方的行为可能在一定程度上具有合法性基础。但即便如此，对方在行使权利时也应遵循诚实信用原则，不得损害您的合法权益，比如不得采取暴力、威胁等非法手段。
若协议中无明确约定：
- 如果协议中没有明确约定对方在您未还款时有权开走您的车，那么对方的行为就缺乏合同依据。在这种情况下，对方未经您同意擅自开走您的车，可能构成对您的财产权的侵犯。
二、从侵权责任角度
- 无论协议中是否有约定，对方未经您同意擅自开走您的车，都可能构成对您的财产权的侵犯。根据《中华人民共和国民法典》的相关规定，侵害他人财产的，财产损失按照损失发生时的市场价格或者其他合理方式计算。因此，您有权要求对方赔偿因开走车辆给您造成的损失。
三、从刑事法律角度
- 在极端情况下，如果对方采取暴力、威胁等手段强行开走您的车，或者开走车辆后拒不归还，且数额较大，可能构成抢劫罪或侵占罪等刑事犯罪。但这种情况相对较少，且需要具体证据来支持。
四、建议与措施
与对方协商：
- 首先，您可以尝试与对方协商，了解对方开走车辆的具体原因和目的，并寻求双方都能接受的解决方案。比如，您可以提出尽快还款或提供其他担保方式来换回车辆。
寻求法律帮助：
- 如果协商无果，或者您认为对方的行为已经严重侵犯了您的合法权益，您可以寻求法律帮助。比如，您可以向公安机关报案，或者向人民法院提起诉讼，要求对方返还车辆并赔偿损失。
保留证据：
- 在处理此类纠纷时，保留相关证据至关重要。您应尽可能收集并保存与纠纷相关的所有证据，如协议、聊天记录、转账记录、车辆行驶证等，以便在需要时提供证明。
最后，我理解这类纠纷可能给您带来很大的困扰和不便。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。作为专业律师，我将竭诚为您提供专业的法律服务。