结论：在您未离婚且已签署孩子归对方并支付抚养费的协议的情况下，您支付的抚养费并不属于对方的个人财产，而是用于孩子的抚养和教育。若您现在不愿离婚，该协议在未得到法院确认或双方重新协商一致前，并不直接产生法律效力，但已支付的抚养费一般不予退还。

详细分析：

1. 抚养费的性质：

   • 抚养费是父母对未成年子女负有的法定义务，旨在保障孩子的生活、教育和医疗等需求。
   • 根据《中华人民共和国民法典》第一千零八十五条，离婚后，子女由一方直接抚养的，另一方应当负担部分或者全部抚养费。但此条款同样适用于未离婚但分居或实际抚养情况发生变化的情形，即非直接抚养方有义务支付抚养费。

2. 协议的法律效力：

   • 您与对方签署的关于孩子抚养权的协议，在未得到法院确认或双方重新协商一致并办理相关手续前，并不直接产生法律效力。特别是在您未离婚的情况下，该协议更多体现的是双方的意愿，但无法改变法律上父母对子女的共同抚养义务。
   • 若您现在不愿离婚，且希望变更抚养协议，应与对方重新协商，并尽可能达成书面协议。若协商不成，可通过法律途径解决。

3. 已支付抚养费的处理：

   • 您已支付的抚养费，无论离婚与否，均应视为对孩子的抚养投入，不属于对方的个人财产。
   • 若您现在不愿离婚，且希望追回已支付的抚养费，这通常是不被支持的。因为抚养费是用于孩子的抚养和教育，即使双方关系发生变化，也不应影响孩子的权益。

4. 后续行动建议：

   • 重新协商：与对方重新协商抚养协议，明确双方的权利和义务，特别是抚养费的支付方式和金额。
   • 法律途径：若协商不成，可寻求法律帮助，通过法院解决抚养纠纷。法院会根据孩子的实际需要、父母的负担能力和当地的实际生活水平等因素来确定抚养费的数额和支付方式。
   • 关注孩子权益：无论双方关系如何变化，都应始终关注孩子的权益和福祉，确保孩子得到充分的抚养和教育。

特殊情况说明：

• 若您能证明在签署协议时存在欺诈、胁迫等情形，导致协议内容显失公平或违反法律强制性规定，您可向法院申请撤销或变更该协议。但这一过程需要充分的证据支持，且法院会综合考虑各种因素来做出裁决。

法律依据：

• 《中华人民共和国民法典》第一千零八十五条：离婚后，子女由一方直接抚养的，另一方应当负担部分或者全部抚养费。负担费用的多少和期限的长短，由双方协议；协议不成的，由人民法院判决。前款规定的协议或者判决，不妨碍子女在必要时向父母任何一方提出超过协议或者判决原定数额的合理要求。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。