结论前置：您目前处于桡骨和尺骨骨折的恢复期，单位要求您回去工作或先离职的做法可能涉及违法，您有权拒绝并要求单位给予合理的医疗期。

具体分析如下：

1. 医疗期的法律规定：

   • 根据我国《企业职工患病或非因工负伤医疗期规定》，职工因患病或非因工负伤需要停止工作医疗时，根据本人实际参加工作年限和在本单位工作年限，给予三个月到二十四个月的医疗期。
   • 您的桡骨和尺骨骨折，显然属于需要医疗和休息的情况，单位应当给予您相应的医疗期。

2. 单位要求的合法性：

   • 单位要求您回去工作，如果您的身体状况确实无法胜任工作，那么这一要求是不合法的。您有权拒绝，并要求单位按照法律规定给予您医疗期。
   • 单位要求您先离职，这同样是不合法的。在医疗期内，单位不得解除与您的劳动合同，除非您有严重违反单位规章制度等法定解除情形。

3. 您的应对策略：

   • 与单位沟通：首先，您可以与单位进行沟通，说明您的身体状况和医疗需要，要求单位给予合理的医疗期。
   • 收集证据：如果单位坚持要求您回去工作或离职，您可以收集相关证据，如医疗证明、诊断书等，以备后续维权之需。
   • 申请劳动仲裁：如果单位拒绝给予医疗期或违法解除劳动合同，您可以向当地劳动仲裁机构申请劳动仲裁，维护自己的合法权益。

4. 注意事项：

   • 在整个过程中，您要保持冷静和理性，避免与单位发生不必要的冲突。
   • 及时咨询并寻求专业法律帮助（这里即向我咨询），以确保自己的权益得到最大程度的保护。

行动建议：您应首先与单位进行友好沟通，明确表达您的医疗需要和依据的法律规定。如果单位不予理会或采取不当措施，您可以考虑通过法律途径来维护自己的权益。在整个过程中，如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。