结论：不可以随意不去上班，需根据具体情况履行相应义务，否则可能面临不利后果。以下从不同情况为你详细分析：

1. 若未经单位同意擅自不去上班
   • 违反单位规章制度层面：停工留薪期满后，即使你之前受伤，但身体已经恢复，就应当回到工作岗位继续工作。如果未经单位同意擅自不去上班，这属于违反单位规章制度的行为。单位有权依据其内部合法的规章制度对你进行处理，比如给予警告、扣发工资等处罚措施。
   • 劳动关系解除层面：如果这种擅自离岗的行为情节严重，比如连续旷工达到一定天数，根据《劳动合同法》的相关规定，单位有权解除与你的劳动合同，并且这种情况下单位一般无需支付经济补偿。因为你的行为属于严重违反用人单位的规章制度，不符合获得经济补偿的法定情形。
2. 若因特殊情况无法立即上班且有合理理由
   • 及时沟通与提供证明：如果你确实存在一些特殊情况，比如虽然身体基本恢复，但还需要进行一些后续的康复治疗，或者有其他合理的客观原因导致无法立即上班，你应当及时与单位进行沟通，向单位说明情况，并提供相关的证明材料，如医院的诊断证明、康复治疗建议等。
   • 协商处理：在提供了合理的理由和证明材料后，与单位协商确定一个合理的返岗时间或者安排其他合适的工作方式，如暂时调整工作岗位、实行弹性工作制等。如果双方能够达成一致意见，那么你可以按照协商的结果来执行，这样既保障了你的权益，也维护了单位的正常工作秩序。