结论：签了委托合同后，一般情况下不可以随意不委托，但在特定条件下可以解除委托合同。
详细分析：
委托合同的性质：
- 委托合同是委托人和受托人约定，由受托人处理委托人事务的合同。这种合同基于双方的信任和依赖关系而成立，因此具有一定的特殊性。
不可以随意不委托的情况：
- 在委托合同有效期内，如果双方没有约定解除合同的条件，且没有出现法定解除合同的情形，那么委托人或受托人一般不能随意解除合同。这是因为随意解除合同可能会损害对方的利益，破坏合同的稳定性和可预测性。
可以解除委托合同的情况：
- 双方协商一致：如果委托人和受托人经过协商，达成一致意见，可以解除委托合同。这是最直接、最和平的解决方式。
- 法定解除情形：根据《中华人民共和国民法典》的相关规定，当出现以下情形时，委托人或受托人可以解除合同：
- 因不可抗力致使不能实现合同目的；
- 在履行期限届满前，当事人一方明确表示或者以自己的行为表明不履行主要债务；
- 当事人一方迟延履行主要债务，经催告后在合理期限内仍未履行；
- 当事人一方迟延履行债务或者有其他违约行为致使不能实现合同目的；
- 法律规定的其他情形。
- 任意解除权：在委托合同中，委托人或者受托人可以随时解除委托合同。但需要注意的是，因解除合同造成对方损失的，除不可归责于该当事人的事由外，无偿委托合同的解除方应当赔偿因解除时间不当造成的直接损失，有偿委托合同的解除方应当赔偿对方的直接损失和合同履行后可以获得的利益。
解除委托合同的后果：
- 如果解除委托合同，双方应当根据合同约定和法律规定进行清算和结算。受托人应当将处理委托事务取得的财产转交给委托人，并报告委托事务的处理结果。如果因解除合同给对方造成损失，应当根据过错程度承担相应的赔偿责任。
建议：
- 在签订委托合同前，双方应当充分了解合同的内容和条款，明确各自的权利和义务。
- 如果需要解除委托合同，建议双方先进行协商，尽量达成一致意见，以减少纠纷和损失。
- 如果无法协商一致，且符合法定解除合同的情形，可以依法解除合同，但应当注意保护对方的合法权益，避免造成不必要的损失。
如果您在委托合同方面有任何疑问或需要进一步的法律帮助，请直接向我咨询。