结论：试用期离职后，您有权要求上家单位出具离职证明，且单位必须依法出具；若原单位拒绝出具，您可通过协商、投诉或法律途径解决，但无法直接“要回”已提交的离职证明原件（若已提交新单位）。

具体分析如下：

1. 试用期离职，单位必须出具离职证明

根据《劳动合同法》第50条，无论试用期还是正式期，劳动者离职时，用人单位均需在解除或终止劳动合同时出具离职证明。离职证明是证明您与原单位劳动关系终止的法定文件，包含工作期限、岗位、离职原因等关键信息，新单位入职、社保转移等均需提供。

例外情况：若您未实际离职（如试用期被辞退但未办理手续），或单位已出具但您遗失，需与单位协商补办，但单位无权拒绝。

2. 若原单位拒绝出具离职证明，如何维权？

若单位以“试用期未转正”“未提前通知”等理由拒绝出具，属于违法行为。您可采取以下步骤：

• 协商：与HR或上级沟通，明确要求依法出具；
  
• 投诉：向当地劳动监察大队举报（通常15日内处理）；
  
• 仲裁/诉讼：若投诉无果，可申请劳动仲裁，要求单位出具证明并可能索赔（如因未出具证明导致无法入职新单位的损失）。
  

3. 能否“要回”已提交的离职证明原件？

若您已将离职证明原件提交给新单位，原单位无义务返还原件，但您可：

• 要求原单位补办：若需多份证明（如办理社保、公积金），可要求原单位出具多份原件或盖章复印件；
  
• 向新单位说明情况：若需再次使用，可请新单位协助出具接收证明，或与原单位协商出具电子版/扫描件。
  

温馨提示：

离职证明是劳动者的重要权益凭证，建议离职时主动索要并妥善保管。若遇单位违法拒开，及时维权避免损失。如有其他劳动纠纷（如工资拖欠、竞业限制等），欢迎随时向我咨询。