是否要拒绝担任公司财务负责人，不能一概而论，需要结合你的个人职业规划、公司情况以及该职位可能带来的法律风险等多方面因素来综合考虑。以下是一些具体的分析角度和建议：

一、个人职业规划角度

1. 职业目标：如果你希望未来在财务领域有更深入的发展，担任财务负责人可能是一个很好的机会，可以积累丰富的财务管理经验，提升自己的职业竞争力。
2. 兴趣与专长：考虑你是否对财务工作有浓厚的兴趣，以及是否具备相关的专业知识和技能。如果对财务工作不感兴趣或缺乏相关能力，担任该职位可能会让你感到压力重重，甚至影响工作表现。

二、公司情况角度

1. 公司规模与性质：大型企业或上市公司的财务负责人通常承担着更重的责任和风险，需要更高的专业素养和应对能力。而小型企业或初创公司的财务负责人可能相对轻松一些，但也可能面临更多的不确定性和挑战。
2. 公司财务状况：了解公司的财务状况，包括是否存在潜在的财务风险、税务问题等。如果公司财务状况不佳，担任财务负责人可能会让你陷入不必要的法律纠纷中。
3. 公司治理结构：考察公司的治理结构是否完善，是否存在内部控制缺陷或管理层滥用职权等问题。一个健全的治理结构可以降低你作为财务负责人的法律风险。

三、法律风险角度

1. 民事责任：作为财务负责人，你可能需要对公司的财务报表、税务申报等负责。如果因你的过失或故意行为导致公司遭受损失，你可能需要承担相应的民事赔偿责任。
2. 行政责任：如果公司的财务行为违反了相关法律法规，如税务法规、会计法规等，作为财务负责人，你可能会受到行政处罚，如罚款、吊销执业资格等。
3. 刑事责任：在极端情况下，如果公司的财务行为构成犯罪，如逃税、诈骗等，作为财务负责人，你可能会面临刑事指控和刑罚。

四、建议与决策

1. 深入了解：在做出决定前，建议你深入了解公司的财务状况、治理结构以及该职位的具体职责和要求。你可以与公司管理层进行沟通，了解他们对你的期望和要求。
2. 评估风险：结合你的个人职业规划、公司情况以及法律风险等因素，评估担任财务负责人的风险与收益。如果风险过高或收益不符合你的期望，你可以考虑拒绝该职位。
3. 寻求专业意见：如果你对财务或法律方面的问题存在疑虑，可以寻求专业财务或法律人士的意见。他们可以为你提供更具体的建议和指导。

最后，无论你做出什么决定，都要确保是基于充分的信息和理性的分析。如果你决定接受该职位，建议你与公司签订明确的劳动合同或聘任协议，明确双方的权利和义务，以降低潜在的法律风险。如果你有任何法律问题或需要进一步的法律咨询，可以直接向我提问。