在答应合伙后又想拒绝合伙人，这确实是一个需要谨慎处理的问题。核心结论是：你可以通过与合伙人坦诚沟通、协商解除合伙关系或依据合伙协议/法律规定来处理此事，但需注意方式方法，以避免不必要的法律纠纷。

一、坦诚沟通，表达意愿

1. 选择合适时机与方式：找一个对双方都方便的时间和地点，以平和、诚恳的态度与合伙人进行面对面交流。如果面对面交流有困难，也可以选择电话或视频会议等方式。
2. 明确表达拒绝意愿：在沟通中，要直接而明确地表达你不想继续合伙的意愿。可以说明原因，如个人发展规划变化、资金问题、对合伙项目前景的担忧等。但需注意，原因应真实合理，避免无端指责或编造借口。
3. 倾听合伙人意见：在表达自己的意愿后，也要给合伙人表达意见的机会。他们可能会提出一些解决方案或建议，你可以认真考虑并回应。

二、协商解除合伙关系

1. 回顾合伙协议：如果双方之前签订了合伙协议，应仔细回顾协议中关于解除合伙关系的条款。这些条款可能规定了解除合伙的条件、程序以及违约责任等。
2. 协商解除方案：根据合伙协议和实际情况，双方可以协商制定解除合伙关系的方案。方案应明确解除的时间、方式、财产分割、债务承担等事项。
3. 签订解除协议：在协商一致后，双方应签订书面解除协议，并明确各自的权利和义务。这有助于避免未来可能出现的纠纷。

三、依据法律规定处理

1. 了解相关法律规定：如果双方没有签订合伙协议或协议中没有规定解除合伙关系的条款，那么应依据《中华人民共和国民法典》中关于合伙合同的规定来处理。根据法律规定，合伙人可以随时解除不定期合伙合同，但是应当在合理期限之前通知其他合伙人。
2. 通知义务：在决定解除合伙关系后，你应履行通知义务，即在合理期限之前通知其他合伙人。通知方式可以是书面或口头，但为了保留证据，建议采用书面形式。
3. 处理合伙财产与债务：在解除合伙关系时，双方应共同处理合伙财产和债务。如果合伙财产不足以清偿债务，合伙人应按照出资比例或协议约定承担连带责任。

四、注意事项与法律后果

1. 避免擅自退出：在未与合伙人协商一致或未履行通知义务的情况下擅自退出合伙，可能会构成违约，需要承担违约责任。
2. 保留证据：在整个过程中，应保留好相关证据，如沟通记录、解除协议、财产分割清单等。这些证据在未来可能出现的纠纷中起到关键作用。
3. 寻求法律帮助：如果双方在处理过程中出现分歧或纠纷无法协商解决，可以寻求法律帮助或通过诉讼途径解决。

最后，我想强调的是，处理合伙关系解除问题时应保持冷静和理性，遵循法律规定和合伙协议约定，通过协商和沟通来解决问题。如果有任何疑问或需要进一步的法律帮助，可以直接向我咨询。