结论是：在对方不给钱但双方签有自定义协议书的情况下，一般能要回钱款，但具体能否要回以及要回的方式，需根据协议的效力、履行情况等因素综合判断。以下从不同角度进行分析：
一、协议有效且对方违约的情况
法律依据：根据《民法典》的相关规定，依法成立的合同受法律保护，当事人应当按照约定全面履行自己的义务。如果一方不履行合同义务或者履行合同义务不符合约定，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
操作建议：
- 协商：首先，您可以尝试与对方进行协商，要求其按照协议约定支付款项，并保留好沟通记录，如聊天记录、录音等。
- 起诉：如果协商无果，您可以收集协议书、履行协议的证据（如交货凭证、服务记录等），向法院提起诉讼，要求对方支付款项。
- 强制执行：若法院判决后对方仍不履行，您可以申请强制执行其财产，以维护自己的合法权益。
注意事项：
- 诉讼时效：一般来说，诉讼时效为三年，从应付款日起算。您需要在时效内主张权利，否则可能会丧失胜诉权。
- 证据收集：在起诉前，务必收集好相关证据，以证明对方违约以及您已履行协议义务。
二、协议无效或可撤销的情况
法律依据：如果协议存在欺诈、胁迫、显失公平等情形，导致协议无效或可撤销，那么您可以请求法院或仲裁机构确认协议的效力，并根据处理结果要求对方返还已支付的款项。
操作建议：
- 确认效力：首先，您需要向法院或仲裁机构提出申请，请求确认协议的效力。
- 要求返还：如果协议被确认无效或可撤销，您可以根据处理结果要求对方返还已支付的款项。
注意事项：
- 举证责任：在申请确认协议效力时，您需要承担举证责任，证明协议存在无效或可撤销的情形。
- 及时处理：一旦发现协议存在无效或可撤销的情形，应及时处理，以免错过最佳时机。
三、双方都履约无违约，但一方想回钱的情况
法律依据：如果双方都按照协议约定履行了义务，没有违约行为，那么一方想回钱就需要看协议中是否有关于提前终止或退款的约定。
操作建议：
- 查看协议：首先，您需要查看协议中是否有关于提前终止或退款的约定。
- 协商或起诉：如果有约定，按照约定处理；如果没有约定，则较难要回款项。此时，您可以尝试与对方协商，看是否能够达成一致意见；如果协商无果，且您认为自己的权益受到了侵害，可以考虑向法院提起诉讼，但胜诉的可能性可能较小。
注意事项：
- 协议条款：在签订协议时，务必仔细阅读协议条款，特别是关于提前终止和退款的约定。
- 风险评估：在没有约定的情况下，要回钱款的可能性较小，您需要做好风险评估和准备。