结论：交押金但没干活，押金是否可以退还，需根据具体情况判断，但通常情况下，如果未违反合同约定且符合法定条件，押金应当退还。以下从不同角度为您详细分析：
一、法律角度
《中华人民共和国劳动合同法》的相关规定：
- 根据《中华人民共和国劳动合同法》第九条，用人单位招用劳动者时，不得要求劳动者提供担保或者以其他名义向劳动者收取财物。这意味着，从法律层面讲，用人单位收取押金本身就是违法的。
- 若用人单位违反此规定收取了押金，根据《中华人民共和国劳动合同法》第八十四条，劳动行政部门将责令其限期退还劳动者本人，并可能处以罚款。
押金退还的条件：
- 在您未实际工作的情况下，如果未违反与用人单位签订的合同中的任何条款，您完全有权要求退还押金。
- 退还押金通常不需要您已经实际开始工作为前提，只要您未违反合同约定，且符合法定退还条件，用人单位就应当退还。
二、实际操作角度
与用人单位协商：
- 您首先可以尝试与用人单位进行友好协商，说明法律规定，要求其退还押金。这是最直接且成本最低的方式。
向劳动监察部门投诉：
- 如果协商无果，您可以向当地劳动行政部门投诉举报。劳动行政部门将依法对用人单位进行监督检查，并责令其限期退还押金及可能处以罚款。
申请劳动仲裁或法律诉讼：
- 如果劳动监察部门的处理未能满足您的诉求，或者您希望通过更为正式的法律途径解决争议，您可以向劳动争议仲裁机构申请仲裁，甚至向法院起诉。
- 在仲裁或诉讼过程中，您需要提供充分的证据来支持自己的主张，如押金收据、劳动合同等。
三、特殊情况考虑
- 合同中有特别约定：如果合同中有关于押金退还的特别约定，且该约定不违反法律法规的强制性规定，那么双方应按照合同约定执行。但如前所述，由于收取押金本身可能违法，因此合同中的此类约定很可能被视为无效。
- 用人单位拒绝退还：如果用人单位拒绝退还押金，且您已经尝试了协商、投诉等途径均未果，那么申请劳动仲裁或法律诉讼将是您维护自己合法权益的有效手段。
建议：在处理此类问题时，建议您首先保留好所有相关证据，如押金收据、劳动合同等。然后，您可以根据上述建议，先尝试与用人单位协商解决。如果协商无果，再考虑向劳动监察部门投诉或申请劳动仲裁/法律诉讼。如果您在此过程中遇到任何法律问题或需要进一步的法律帮助，请随时向我咨询。