若你并不想回去上班或对回去上班存在疑虑，需要分情况来应对老板要求回去上班这一情况：

1. 劳动合同及公司规章制度层面：

   • 首先，查看你的劳动合同以及公司的规章制度。如果劳动合同中明确规定了你的工作地点、工作时间以及休假等相关条款，且公司要求你回去上班的行为违反了这些条款，那么你有权依据合同拒绝公司的要求。例如，若你正处于合同约定的休假期间，公司无权单方面要求你提前结束休假回去上班。
   • 同时，也要留意公司规章制度中关于工作安排、休假等方面的规定。如果公司要求你回去上班的行为违反了其自身制定的规章制度，这同样可能构成违法行为，你可以据此与公司进行沟通协商。

2. 特殊情况下的法定权益：

   • 如果你因生病、受伤等原因正在享受医疗期，或者你正处于产假、婚假、丧假等法定假期内，那么公司要求你回去上班的行为是违法的。在这种情况下，你可以明确告知公司你正处于法定假期内，并拒绝公司的要求。如果公司坚持要求你回去上班，你可以向劳动监察部门投诉，以维护自己的合法权益。
   • 另外，如果你因工作原因受到事故伤害或者患职业病需要暂停工作接受工伤医疗的，在停工留薪期内，原工资福利待遇不变，由所在单位按月支付。公司也无权要求你回去上班。

3. 沟通协商与证据保留：

   • 在与公司沟通时，尽量保持冷静和理性，明确表达自己的立场和诉求。如果公司坚持要求你回去上班，你可以要求公司出具书面通知，并明确说明要求你回去上班的理由和依据。
   • 同时，保留好与公司的沟通记录、劳动合同、公司规章制度等相关证据，以备不时之需。这些证据在后续可能的劳动争议处理中将起到至关重要的作用。

4. 寻求法律援助：

   • 如果与公司沟通无果，且你认为公司的要求确实侵犯了你的合法权益，那么你可以考虑寻求法律援助。你可以向当地的劳动监察部门投诉，或者向劳动争议仲裁委员会申请仲裁。在必要时，你还可以向人民法院提起诉讼，以维护自己的合法权益。