不可以直接以未通知定损或未在定损单上签字为由拒赔，但需根据定损合理性及法律程序采取相应措施。以下是具体分析：

一、未通知定损或未签字，不构成拒赔的法定理由

在交通事故赔偿中，对方（或其保险公司）有权对车辆损失进行定损，这是理赔的必要环节。即使未通知您到场或未让您在定损单上签字，只要定损过程合法、结果合理，您仍需履行赔偿义务。法律并未规定定损必须通知对方到场或签字确认，因此不能以此为由拒绝赔偿。

二、若对定损结果有异议，应通过合法途径解决

如果您认为定损结果不合理（如金额过高、项目不必要等），有权提出异议并要求重新定损，但需注意以下程序：

1. 及时沟通：首先应与对方或其保险公司联系，说明定损结果存在的问题，并要求重新核定损失。
2. 申请第三方评估：若协商无果，可共同委托具有资质的第三方机构（如物价部门、汽车维修行业协会等）对车辆损失进行评估。
3. 保留证据：在争议解决过程中，务必保留好事故现场照片、维修清单、沟通记录等证据，以备后续维权使用。

三、擅自拒赔可能面临法律风险

在定损结果未被推翻或未通过合法途径解决争议前，擅自拒赔可能构成违约，对方有权通过诉讼等方式要求您履行赔偿义务。此外，若因拒赔导致对方损失扩大（如车辆无法及时维修、产生额外费用等），您还可能承担相应的赔偿责任。

四、建议采取的行动步骤

1. 主动沟通：尽快与对方或其保险公司联系，了解定损的具体情况及依据。
2. 提出异议：若对定损结果有异议，明确说明理由并要求重新定损或第三方评估。
3. 协商解决：尝试通过协商达成一致，减少诉讼成本和时间。
4. 寻求法律帮助：若协商无果，可咨询专业律师，通过法律途径维护自身权益。

五、法律依据

根据《中华人民共和国民法典》及相关司法解释，交通事故赔偿应遵循合法、合理、公平的原则。定损作为理赔的重要环节，其结果应具有客观性和合理性。若定损过程存在违法或不合理情形，您有权通过合法途径提出异议，但不得擅自拒赔。

总结：未通知定损或未签字不构成拒赔的法定理由，但您有权对定损结果提出异议并要求重新定损。在争议解决前，应积极沟通、保留证据，并通过合法途径维护自身权益。如有进一步疑问或需要法律帮助，可直接向我咨询。