结论：在委托合同中，并非双方都有任意违约的权利，违约行为需承担相应的法律责任，具体是否需要支付违约金取决于合同中的约定以及违约的具体情形。
分析如下：
委托合同的基本性质：
- 委托合同是双方约定一方（委托人）委托另一方（受托人）处理事务的合同。这种合同关系基于双方的信任和合意建立，因此，双方都应当秉持诚实信用原则，履行各自的义务。
违约行为的法律责任：
- 在委托合同中，如果一方违反合同约定，不履行或不完全履行其义务，就构成违约行为。违约行为通常需要承担相应的法律责任，这可能包括继续履行、采取补救措施、赔偿损失等。
违约金的规定：
- 违约金是合同双方在合同中约定的一种违约责任承担方式。如果合同中明确规定了违约金的数额或计算方式，并且违约行为符合合同中约定的支付违约金的条件，那么违约方就需要按照合同约定支付违约金。
- 需要注意的是，违约金的支付并不是任意的，而是需要基于合同中的明确约定以及违约的具体情形。如果合同中没有约定违约金，或者违约行为不符合支付违约金的条件，那么违约方就不需要支付违约金。
双方违约权利的探讨：
- 在委托合同中，双方并没有任意的违约权利。违约行为是一种违反合同约定的行为，需要承担相应的法律责任。因此，双方都应当尽力履行合同义务，避免违约行为的发生。
- 特殊情况：如果合同中存在某些特殊条款，如解约权条款或免责条款，这些条款可能会对双方的违约权利产生一定影响。但即便如此，这些条款也需要在合同中明确约定，并且符合法律法规的规定。
法律建议：
- 对于委托合同的双方来说，为了避免纠纷和损失的发生，应当在签订合同时就明确约定各自的权利和义务，以及违约责任和违约金的支付方式等。
- 在合同履行过程中，双方应当秉持诚实信用原则，积极履行各自的义务。如果发生违约行为，应当及时与对方沟通协商，寻求解决方案。如果无法协商解决，可以寻求法律途径来维护自己的合法权益。
举例说明：
假设甲委托乙处理一项事务，并在委托合同中约定了如果乙未能按时完成任务，则需要支付一定数额的违约金。如果乙确实未能按时完成任务，那么乙就需要按照合同约定支付违约金给甲。反之，如果甲在合同履行过程中无故解除合同或干扰乙的正常工作，导致乙无法完成任务，那么甲也可能需要承担违约责任，包括支付违约金（如果合同中有约定）或赔偿乙因此遭受的损失。
进一步思考：
在实际操作中，委托合同的双方应当根据具体情况和需求来制定合同条款，确保合同条款的合法性和有效性。同时，双方也应当加强沟通和协作，共同推动合同的顺利履行。如果遇到法律问题或纠纷，可以直接向我咨询，我会根据具体情况提供专业的法律建议和解决方案。