被别人控诉是不可以不去的。作为被告，如果收到法院的传票后无正当理由拒不到庭，或者未经法庭许可中途退庭，法院有权进行缺席判决。缺席判决意味着被告失去了在法庭上进行答辩和举证的机会，法庭会在原告提供的证据和陈述的基础上进行裁决，这很可能对被告不利。
法律后果：
- 缺席判决可能导致被告面临不利的法律后果，如败诉、承担赔偿责任等。
- 缺席判决的法律效力与正常到庭审理后的判决是相同的，被告需要履行判决结果。
特殊情况：
- 如果被告有特殊原因无法按时到庭，应提前向法院提交书面申请，说明合理理由并请求延期开庭。
- 如果被告因重病、不可抗力等正当理由无法到庭，并且提前向法院说明了情况，法院可能会考虑延期审理。
建议：
- 无论被告是否认为自己有罪或无理，都应该积极应诉，出庭为自己辩解。
- 出庭应诉是维护自身合法权益的最佳方式，可以避免因缺席判决而导致的不利后果。
综上所述，被别人控诉后，被告应该按时到庭应诉，以免因缺席判决而面临不利的法律后果。如果有特殊情况无法到庭，应提前向法院说明情况并请求延期开庭。