结论：能否要回押金取决于合同约定及法律规定，若对方不退押金，您可以通过协商、投诉或诉讼等途径解决。以下从不同角度为您详细分析：

1. 合同约定角度

   • 若合同有明确约定：首先要查看您与对方签订的手工活合同中，对于押金退还的具体条款是如何规定的。如果合同中明确约定了完成一定工作量或满足特定条件后押金应予以退还，而您已经完成了首次工作量，后续虽未继续完成但合同未明确将此作为不退押金的理由，那么对方不退押金的行为可能构成违约。您可以依据合同条款，要求对方按照约定退还押金。
   • 若合同无明确约定：当合同中没有对押金退还条件作出清晰规定时，这就存在一定的模糊地带。此时，需要结合行业惯例以及双方交易的目的和公平原则来判断。一般来说，押金是为了保障合同的履行而设立的，如果您没有严重违反合同主要义务，比如没有故意损坏材料、恶意拖延等行为，从公平角度出发，对方应当退还押金。但对方可能会以各种理由拒绝，这就需要您进一步收集证据来维护自己的权益。

2. 法律规定角度

   • 押金性质：押金属于一种担保方式，其目的是确保合同的顺利履行。根据《中华人民共和国民法典》的相关规定，担保合同是主债权债务合同的从合同。在您与对方的手工活合同中，手工活合同是主合同，押金条款是从合同。如果主合同已经部分履行，且您没有根本性违约行为，对方无权扣留押金。
   • 违约责任：如果对方认为您后续三次不打算做手工活构成违约，从而拒绝退还押金，那么需要看合同中是否约定了此种情况下的违约责任。若合同有约定，按照约定处理；若没有约定，对方需要证明您的行为给其造成了实际损失，并且该损失与您不继续做手工活之间存在直接因果关系，否则其扣留押金的行为可能缺乏法律依据。

3. 解决途径

   • 协商：您可以先尝试与对方进行友好协商，向对方说明您的情况以及依据的法律规定和合同条款，争取通过和平的方式解决押金退还问题。在协商过程中，要注意保留好相关的沟通记录，如聊天记录、通话录音等，以备后续需要。
   • 投诉：如果协商无果，您可以向相关的行业主管部门或消费者协会进行投诉。例如，如果该手工活业务涉及到特定的行业监管，您可以向对应的监管部门反映情况，请求他们介入调查并协调解决。消费者协会也可以为您提供一定的帮助和指导，促使对方退还押金。
   • 诉讼：当协商和投诉都无法解决问题时，您可以考虑向法院提起诉讼。在诉讼过程中，您需要提供充分的证据来证明自己的主张，如合同、完成工作量的证明、与对方的沟通记录等。法院会根据双方提供的证据和法律规定进行审理，并作出公正的判决。

建议：在处理此类问题时，您要尽可能收集和保留与手工活合同相关的所有证据，包括合同文本、付款凭证、工作成果证明、与对方的沟通记录等。这些证据将在后续的协商、投诉或诉讼中起到关键作用，有助于您维护自己的合法权益。如果您在处理过程中遇到任何疑问或需要进一步的帮助，随时都可以向我咨询。