委托合同双方并非可以完全任意解除合同，其解除权受到一定限制，并需承担相应法律后果。以下从多个角度进行详细分析：
一、任意解除权的法律依据与基本概念
根据《中华人民共和国民法典》第九百三十三条的规定，委托人或者受托人可以随时解除委托合同。这一权利基于委托合同的高度人身信赖关系而设立，旨在保护当事人在信任基础动摇或丧失时的合法权益。然而，这并不意味着双方可以毫无限制地随意解除合同。
二、任意解除权的行使方式与程序
- 通知对方：行使任意解除权时，当事人应以通知的方式明确告知对方。为避免纠纷，建议采用书面形式（如书信、电子邮件等）并保留证据。
- 通知到达生效：解除合同的通知一旦到达对方，合同即视为解除。若对方对解除有异议，可请求人民法院或仲裁机构确认解除的效力。
三、行使任意解除权可能产生的法律后果
赔偿损失：
- 无偿委托合同：解除方需赔偿因解除时间不当给对方造成的直接损失。例如，如果受托人已经为处理委托事务付出了时间和精力，但因委托人突然解除合同而遭受了直接经济损失，委托人应予以赔偿。
- 有偿委托合同：除直接损失外，解除方还需赔偿合同履行后对方可获得的利益。这通常涉及到受托人因合同解除而失去的预期收益，委托人需对此进行补偿。
结算与返还：合同解除后，双方应根据实际情况进行结算，受托人应返还占有的委托人财产，委托人应支付已处理委托事务的相应报酬。
四、任意解除权行使的限制情形
虽然法律赋予了任意解除权，但在以下情况下，该权利的行使可能受到限制：
- 合同另有约定：若委托合同中明确排除了任意解除权的行使，或对行使条件、方式等作出了特别约定，当事人应遵循合同约定。例如，合同中可能约定了特定的解除条件或程序，或者明确禁止在特定期间内解除合同。
- 涉及公共利益：当委托事务与公共利益密切相关时，任意解除权的行使可能会受到约束，以防止对公共利益的损害。例如，如果委托事务涉及到公共安全、环境保护等公共利益事项，解除合同可能会对这些利益造成不利影响。
- 违背诚实信用原则：若行使任意解除权的目的在于逃避责任、损害对方利益或违反诚实信用原则，法院可能认定解除行为无效。例如，如果委托人无正当理由突然解除合同，导致受托人遭受重大损失，且解除行为明显违背了诚实信用原则，法院可能会不支持委托人的解除行为。
- 委托事务完成需期限或条件：在委托事务完成所需的特定期限或条件成就之前，任意一方通常不得随意解除合同。例如，如果委托事务需要受托人在特定时间内完成，且该时间对委托事务的完成至关重要，那么委托人或受托人在此期间内不得随意解除合同。
- 涉及第三人利益：若委托合同涉及第三人的合法权益，解除合同时应充分考虑并保护第三人的权益。例如，如果委托事务涉及到第三人的财产权益或人身权益，解除合同可能会对这些权益造成不利影响，因此需要谨慎处理。
五、实践中的建议
- 谨慎行使解除权：在行使解除权之前，应充分考虑可能给对方造成的损失以及自身可能承担的赔偿责任，避免滥用权利。
- 协商解决优先：在可能的情况下，双方应通过友好协商的方式解决合同解除的问题，以减少不必要的法律纠纷和经济损失。
- 明确合同条款：在签订委托合同时，双方应明确约定解除合同的条件和后果，以便在发生争议时有据可依。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。