结论：离职四五天再回去是否算离职，这主要取决于您与用人单位之间的具体约定以及实际情况，不能一概而论。以下从不同角度进行分析：

1. 若已办理正式离职手续：

   • 法律分析：一旦您与用人单位办理了正式的离职手续，包括但不限于签署离职协议、交接工作、结清工资等，那么从法律上讲，您与用人单位的劳动关系就已经终止。此时，即使您离职后四五天再回去，也不再是该单位的员工，除非双方重新签订劳动合同或达成其他用工协议。
   • 建议：如果您已经办理了正式离职手续，但出于某种原因希望重新回到原单位工作，建议您与用人单位进行协商，看是否能够重新建立劳动关系。

2. 若未办理正式离职手续，只是暂时离开：

   • 法律分析：如果您只是暂时离开工作岗位，并未与用人单位办理正式的离职手续，且双方对您的离职状态没有明确约定，那么您离职四五天后再回去，可能仍然被视为该单位的员工。但这种情况存在不确定性，因为用人单位可能认为您已经离职，从而安排了其他人员接替您的工作。
   • 建议：为了避免不必要的纠纷，如果您只是暂时离开工作岗位，建议您与用人单位进行沟通，明确您的离职状态和返回时间。如果可能的话，最好以书面形式进行确认。

3. 若用人单位有明确规定或双方有约定：

   • 法律分析：如果用人单位在规章制度或劳动合同中明确规定了离职后重新入职的条件和程序，或者您与用人单位之间有关于离职后重新入职的特别约定，那么您离职四五天后再回去是否算离职，就需要根据这些规定或约定来判断。
   • 建议：在这种情况下，您需要仔细阅读用人单位的规章制度和劳动合同，或者回顾您与用人单位之间的约定，以确定您的权利和义务。如果您不确定如何解读这些规定或约定，可以寻求法律帮助或咨询专业人士。

额外提醒：无论哪种情况，如果您离职后希望重新回到原单位工作，都建议您与用人单位进行积极沟通，明确双方的权利和义务，以避免不必要的法律纠纷。同时，您也可以了解相关的劳动法律法规，以便更好地维护自己的合法权益。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。