如果工厂辞退工人却坚持不出具书面辞退通知，工人确实会面临一些维权上的困难，但并非没有应对办法。以下是一些建议，希望能帮助到您：

首先，要明确的是，根据《中华人民共和国劳动合同法》的相关规定，用人单位在解除劳动合同时，应当向劳动者出具解除或者终止劳动合同的书面证明。这是用人单位的法定义务，如果用人单位未履行这一义务，劳动行政部门有权责令其改正，并且如果给劳动者造成了损害，用人单位还应当承担赔偿责任。

针对您的情况，我建议采取以下步骤来维护自己的权益：

1. 收集证据：

   • 尽可能收集与工厂辞退您相关的所有证据，包括但不限于与工厂的沟通记录（如短信、微信、邮件等）、工资单、工作证、考勤记录等。
   • 如果可能的话，尝试获取其他同事的证言，以证明您确实被工厂辞退且未收到书面通知。

2. 与工厂再次沟通：

   • 尝试以书面形式（如邮件或信件）向工厂提出要求，明确要求工厂出具书面的辞退通知，并支付拖欠的工资及经济补偿金。
   • 在沟通中，可以引用《中华人民共和国劳动合同法》的相关规定，以增强自己的立场。

3. 向劳动行政部门投诉：

   • 如果工厂仍然拒绝出具书面辞退通知，您可以向当地的劳动行政部门（如劳动监察大队）投诉。
   • 投诉时，应提交您收集的所有证据，并详细说明情况。劳动行政部门将会对工厂进行调查，并责令其改正违法行为。

4. 申请劳动仲裁：

   • 如果劳动行政部门的处理未能满足您的需求，或者工厂仍然拒绝履行其义务，您可以向当地的劳动仲裁委员会申请劳动仲裁。
   • 在劳动仲裁过程中，您需要提交证据来证明工厂辞退您且未出具书面通知的事实，以及您因此遭受的损失。劳动仲裁委员会将会根据事实和法律规定作出裁决。

5. 寻求法律援助：

   • 如果您在维权过程中遇到困难或不确定如何操作，可以寻求法律援助或咨询专业律师。
   • 律师可以为您提供法律建议，帮助您准备证据材料，并在劳动仲裁或诉讼过程中代表您出庭。

最后，我想强调的是，维护自己的合法权益是每个劳动者的权利。不要因为工厂的威胁或拒绝而放弃自己的权益。通过合法途径维权，不仅是为了自己，也是为了维护整个劳动市场的公平和正义。希望这些建议能对您有所帮助。