现场勘验光缆定损时，被告不能不去。以下是详细的分析：

在建设工程相关的纠纷中，特别是涉及到光缆损坏的赔偿问题，现场勘验是一个非常重要的环节。这一环节的目的在于通过实地查看和评估，确定光缆的损坏程度、原因以及可能的修复费用等关键信息，为后续的法律程序提供有力的证据支持。

1. 法律义务与责任：

   • 被告作为案件的一方当事人，有义务参与现场勘验，以便了解案件的具体情况，并对勘验结果发表意见。
   • 如果被告无故拒绝参与现场勘验，可能会被视为放弃了对相关证据进行质证的权利，这可能对被告在后续法律程序中的权益产生不利影响。

2. 现场勘验的重要性：

   • 现场勘验是确定光缆损坏事实和损失程度的重要手段。通过勘验，可以直观地了解光缆的损坏情况，包括损坏的位置、范围、程度等。
   • 勘验结果对于后续的赔偿协商、诉讼程序等都具有重要的参考价值。如果被告不参与勘验，就无法对勘验结果提出有效的异议或反驳。

3. 可能的法律后果：

   • 如果被告拒绝参与现场勘验，且没有合理的解释或理由，法院可能会根据现有证据作出对被告不利的判决。
   • 在某些情况下，被告的拒绝行为甚至可能被视为妨碍司法公正，从而面临更严重的法律后果。

因此，从法律义务、现场勘验的重要性以及可能的法律后果等方面来看，被告在现场勘验光缆定损时是不能不去的。如果确实有特殊原因无法参与，应及时向法院或相关方说明情况，并寻求合理的解决方案。