不履行合同义务是否应赔偿违约金，主要取决于合同中是否有明确的违约金条款以及违约的具体情况。以下是对此问题的详细分析：
合同中有约定违约金条款
- 违约方构成违约：如果合同中明确约定了违约金条款，并且一方未履行合同义务的行为确实构成了违约，那么守约方有权依据合同约定要求违约方支付违约金。例如，在一份房屋买卖合同中，若约定逾期支付购房款需支付合同总价款一定比例的违约金，那么当买方逾期支付时，卖方就有权要求买方支付该违约金。
- 违约金的合理性：违约金的数额应当合理，不能过高或过低。根据《中华人民共和国民法典》第五百八十五条的规定，约定的违约金低于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以增加；约定的违约金过分高于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以适当减少。通常，当约定违约金超过造成损失的30%时，可认定为“过分高于造成的损失”。
- 违约方存在免责情形：即便合同中有违约金条款，但如果违约方能够证明其存在法定或约定的免责情形（如不可抗力），则可以免除支付违约金的责任。例如，因自然灾害导致合同无法履行的情况，违约方可能无需支付违约金。
合同中没有约定违约金条款
- 不能主张违约金：如果合同中没有约定违约金条款或者约定不明确，那么守约方就无法直接要求违约方支付违约金。此时，应依据《中华人民共和国民法典》的相关规定来处理违约责任。
- 可要求赔偿损失：虽然无法主张违约金，但守约方仍然有权要求违约方赔偿因其违约行为所造成的实际损失。这些损失包括合同履行后可以获得的利益，但不得超过违约一方订立合同时预见到或者应当预见到的因违约可能造成的损失。例如，因乙方未交付水果导致甲方失去转售利润的情况，甲方可以要求乙方赔偿这部分损失。
建议：
- 在签订合同时，务必仔细审查合同条款，特别是关于违约责任和违约金的部分，确保合同条款明确、合理，以避免未来可能出现的纠纷。
- 如果合同中没有约定违约金条款，但违约行为确实给对方造成了损失，守约方应积极收集证据，证明自己的损失范围和数额，以便在后续的法律程序中主张赔偿。
- 在处理合同纠纷时，建议寻求专业法律人士的帮助，以确保自身权益得到充分保护。
如果您有具体的合同纠纷问题或需要进一步的法律建议，请直接向我咨询，我会根据您的具体情况提供详细的法律分析和建议。