结论：您想要解除代理法人身份后进行维权，具体要告谁需根据实际情况判断，可能涉及与委托您担任代理法人的主体之间的纠纷，也可能涉及因您担任代理法人期间公司行为产生的纠纷。以下为您详细分析：

一、与委托您担任代理法人的主体之间的纠纷

1. 若存在委托合同关系：

   • 情况说明：通常，担任代理法人（即法定代表人）是基于与公司的股东或实际控制人之间的某种约定或委托。如果您与委托您担任代理法人的主体（如公司股东、实际控制人等）之间签订了书面或口头的委托合同，且合同中明确规定了双方的权利义务，那么在解除代理法人身份时，若对方存在违约行为（如未按照约定支付报酬、未履行其他合同义务等），您可以依据合同法的相关规定，向对方提起违约之诉。
   • 法律依据：根据《中华人民共和国民法典》合同编的相关规定，当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。

2. 若不存在委托合同关系，但存在事实上的委托关系：

   • 情况说明：即使没有书面合同，如果双方之间存在事实上的委托关系（如通过口头约定、行为默认等方式），且您在担任代理法人期间为对方提供了服务，对方也接受了这种服务，那么在解除关系时，若对方存在不当行为（如利用您的名义进行违法活动、损害您的名誉等），您也可以依据相关法律规定，向对方主张权利。
   • 法律依据：根据《中华人民共和国民法典》的相关规定，民事主体从事民事活动，应当遵循诚信原则，秉持诚实，恪守承诺。若对方违反诚信原则，损害您的合法权益，您有权要求其承担相应的法律责任。

二、因担任代理法人期间公司行为产生的纠纷

1. 若公司存在违法行为，您可能面临的法律责任：

   • 情况说明：作为公司的法定代表人，您在担任期间若公司存在违法行为（如偷税漏税、违法经营等），您可能需要承担相应的法律责任。但如果您能够证明自己对于公司的违法行为并不知情，或者已经尽到了合理的注意义务，那么您的法律责任可能会相应减轻或免除。
   • 法律依据：根据《中华人民共和国公司法》及相关法律法规的规定，公司的法定代表人应当依法履行职责，若因故意或重大过失给公司或他人造成损失的，应当承担赔偿责任。但若您能够证明自己无过错，则可能不承担责任。

2. 若您因公司行为受到损害，可向公司主张权利：

   • 情况说明：如果您在担任代理法人期间，因公司的行为（如未经您同意以您的名义进行担保、借款等）导致您受到损害，您可以依据公司法的相关规定，向公司主张权利，要求公司承担赔偿责任。
   • 法律依据：根据《中华人民共和国公司法》的相关规定，公司应当保护其法定代表人的合法权益，若因公司行为导致法定代表人受到损害的，公司应当承担赔偿责任。

建议：

1. 收集证据：在决定采取法律行动之前，建议您先收集相关证据，如委托合同、公司章程、股东会决议、公司财务报表等，以证明您的主张。
2. 咨询专业律师：由于法律问题具有复杂性和专业性，建议您在采取行动前咨询专业律师，以便更准确地评估您的法律风险和维权策略。
3. 谨慎行事：在解除代理法人身份的过程中，建议您谨慎行事，避免与公司或相关方发生不必要的冲突和纠纷。

若您有任何进一步的法律问题或需要更详细的法律建议，请随时向我咨询。