结论：是否可以不支付投顾佣金而要求退费，这主要取决于你与投顾之间的合同约定以及相关法律法规的规定。以下从不同角度为你详细分析：
合同约定角度：
- 合同内容：首先，你需要仔细审查与投顾签订的合同，特别是关于佣金支付、服务内容、合同解除及退款等方面的条款。如果合同中明确规定了在某些情况下（如服务未达到约定标准、投顾违约等）你可以不支付佣金并要求退费，那么你可以依据合同条款来主张自己的权益。
- 合同解除：如果合同中规定了合同解除的条件和程序，且你符合解除合同的条件，那么你可以按照合同约定的程序解除合同，并依据合同条款要求退费。但需要注意的是，合同解除后，你可能仍需支付投顾已提供服务的部分佣金，具体取决于合同约定。
法律法规角度：
- 《中华人民共和国民法典》相关规定：根据《中华人民共和国民法典》中关于合同违约和解除的规定，如果投顾未能按照合同约定提供服务，或者提供的服务存在瑕疵，导致你无法实现合同目的，你有权要求解除合同并退费。同时，如果投顾存在违约行为，你还可以要求其承担违约责任，包括赔偿损失等。
- 消费者权益保护：如果你作为消费者与投顾之间存在消费关系，且投顾的行为违反了《中华人民共和国消费者权益保护法》的相关规定（如虚假宣传、欺诈等），你可以向相关部门投诉并要求退费。
实际操作建议：
- 与投顾协商：在采取法律行动之前，你可以先尝试与投顾进行协商，看是否能够达成退费协议。协商时，你可以明确表达自己的诉求和理由，并引用合同条款或相关法律法规来支持自己的观点。
- 寻求法律援助：如果协商无果，你可以考虑寻求法律援助或咨询专业律师（比如我，丁艾东律师，专注于公司事务、合同违约责任等领域）。律师可以帮助你分析合同条款、评估案件胜诉率，并为你提供具体的法律建议和操作方案。
- 提起诉讼或仲裁：如果必要，你可以向法院提起诉讼或向仲裁机构申请仲裁，要求投顾退费并承担违约责任。在诉讼或仲裁过程中，你需要提供充分的证据来支持自己的诉求。
可能后果：
- 如果你不支付佣金且没有合法依据（如合同约定或法律法规支持），投顾可能会采取法律行动来追讨佣金，这可能会给你带来不必要的法律纠纷和经济损失。
- 如果你能够依据合同条款或相关法律法规成功主张退费，那么你将能够避免支付不必要的佣金，并可能获得一定的赔偿或补偿。
总结与建议：在处理此类问题时，建议你先仔细审查合同条款，了解自己的权利和义务；然后尝试与投顾进行协商，看是否能够达成退费协议；如果协商无果，再考虑寻求法律援助或提起诉讼/仲裁。如果你有任何疑问或需要进一步的法律帮助，可以直接向我咨询。