结论：公司是否违法不能一概而论，需要结合您与公司的合伙协议内容、公司不退还20000元的具体理由以及相关法律规定来综合判断。以下从不同角度为您详细分析：
一、从合伙协议的角度分析
合伙协议有明确约定：
- 如果您与公司签订的合伙协议中明确规定了合伙人退出时的资金退还方式、条件及期限等，且公司未按照协议约定退还您的20000元，那么公司的行为可能构成违约。根据《中华人民共和国民法典》合同编的相关规定，当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。
合伙协议无明确约定或约定不明：
- 如果合伙协议中没有明确约定合伙人退出时的资金退还问题，或者约定不明确，那么就需要根据《中华人民共和国合伙企业法》的相关规定以及合伙企业的实际情况来判断。在这种情况下，公司不退还20000元可能并不直接构成违法，但可能涉及公平原则、诚实信用原则等法律原则的适用。
二、从公司行为及理由的角度分析
公司有合理理由不退还：
- 如果公司能够证明不退还您的20000元是基于合理的商业考虑或法律原因，例如您违反了合伙协议中的某些重要条款，或者您的退出给公司造成了实际损失等，那么公司不退还资金的行为可能具有合法性。
公司无合理理由不退还：
- 如果公司无法提供合理的理由来解释为什么不退还您的20000元，且该行为明显违反了合伙协议的约定或相关法律规定，那么公司的行为可能构成违法。在这种情况下，您有权要求公司退还资金，并可能通过法律途径来维护自己的合法权益。
三、从法律救济途径的角度分析
协商解决：
- 在发现公司不退还资金后，您首先可以尝试与公司进行协商，寻求双方都能接受的解决方案。这通常是最快捷、最经济的解决方式。
法律诉讼：
- 如果协商无果，您可以考虑通过法律诉讼来维护自己的权益。在提起诉讼前，建议您收集好相关证据，如合伙协议、付款凭证、沟通记录等，以便在诉讼中证明自己的主张。
其他途径：
- 根据具体情况，您还可以考虑通过仲裁、调解等其他途径来解决纠纷。这些途径通常具有更高的灵活性和效率，但也可能受到一些限制和条件的约束。
建议：在处理此类问题时，建议您先仔细审查合伙协议的内容，了解自己的权利和义务。同时，与公司进行积极沟通，尝试寻求双方都能接受的解决方案。如果无法协商解决，您可以考虑咨询专业律师（即向我咨询，我擅长公司事务领域的法律问题），以便更好地了解自己的法律权益和可能的法律救济途径。在采取任何法律行动前，请确保您已经充分了解了相关法律规定和程序要求。