结论：您能否要回打工的钱，取决于这笔钱的性质、保管的约定以及您父亲的行为是否构成法律上的不当得利或侵占等因素。以下从不同角度为您详细分析：
一、若您与父亲之间存在明确的保管约定
有书面或口头约定：如果您与父亲之间有明确的书面或口头约定，表明这笔钱是您委托父亲保管的，那么您父亲就有义务按照约定将钱归还给您。在这种情况下，您可以通过与父亲协商、沟通，要求其履行保管义务，归还您的钱款。如果协商无果，您还可以考虑通过法律途径，如提起民事诉讼，要求父亲返还保管物（即您的钱款）。
无明确约定，但事实行为表明保管关系：即使您与父亲之间没有明确的书面或口头约定，但如果从事实行为上可以推断出双方存在保管关系，比如您将钱交给父亲时明确表示是让其保管，或者父亲在接收钱款时也明确表示同意保管，那么这种事实上的保管关系也是受法律保护的。您同样有权要求父亲归还钱款。
二、若您与父亲之间不存在保管约定，或约定不明确
视为赠与的可能性：如果您将钱交给父亲时，没有明确表示是让其保管，而是出于赠与的目的，或者父亲在接收钱款时认为这是您对他的赠与，那么这笔钱可能就被视为赠与财产。在这种情况下，除非您能够证明赠与行为存在法定撤销情形（如严重侵害赠与人或者赠与人近亲属的合法权益、对赠与人有扶养义务而不履行等），否则您可能无法要求父亲归还这笔钱。
不当得利或侵占的认定：如果您父亲在没有合法依据的情况下，将您的钱款占为己有，且拒不归还，那么这种行为可能构成不当得利或侵占。根据《中华人民共和国民法典》的相关规定，不当得利人应当返还取得的利益；侵占他人财物的，受害人有权请求侵占人返还财物。因此，在这种情况下，您有权要求父亲归还您的钱款，并可以通过法律途径维护自己的合法权益。
三、实际操作建议
与父亲协商沟通：首先，我建议您与父亲进行坦诚的沟通，了解他为何不愿意归还钱款，并尝试通过协商解决问题。毕竟，家庭关系和谐是最重要的。
收集证据：如果协商无果，您需要开始收集相关证据，如转账记录、聊天记录、证人证言等，以证明这笔钱是您的，并且您与父亲之间存在保管关系或父亲存在不当得利、侵占行为。
寻求法律帮助：如果您觉得自己无法处理这个问题，或者父亲的态度强硬，不愿意归还钱款，那么您可以考虑寻求法律帮助。作为一名专业律师，我可以为您提供法律咨询和诉讼代理服务，帮助您维护自己的合法权益。
最后，我想强调的是，家庭关系中的财产纠纷往往比较复杂，涉及到情感、道德和法律等多个方面。因此，在处理这类问题时，我们需要保持冷静和理性，尽量通过协商和沟通解决问题。如果确实无法协商解决，再考虑通过法律途径维护自己的权益。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。