结论：公司没有董事会时，董事一般不能直接解除财务负责人，具体能否解除及解除程序需依据公司章程及相关法律规定来确定。

分析说明：

1. 公司治理结构与职权划分：

   • 在一个典型的公司治理结构中，董事会是公司的决策机构，负责公司的重大决策和监督管理层。财务负责人作为公司的高级管理人员，其任免通常属于董事会的职权范围。
   • 若公司没有设立董事会，那么公司的决策和监督职能可能会由其他机构或个人（如执行董事、股东会等）来承担。此时，财务负责人的任免权也可能相应地归属于这些机构或个人。

2. 公司章程的规定：

   • 公司章程是公司的“宪法”，它规定了公司的基本制度和治理结构，包括各机构和人员的职权划分。
   • 如果公司章程中明确规定了在没有董事会的情况下，由哪位董事或哪个机构来负责财务负责人的任免，那么就应当遵循公司章程的规定。
   • 若公司章程对此没有明确规定，则需要进一步参考相关法律法规或公司内部的规章制度。

3. 相关法律法规的参考：

   • 根据《公司法》及相关法律法规，公司的董事、监事、高级管理人员应当遵守法律、行政法规和公司章程，对公司负有忠实义务和勤勉义务。
   • 在没有董事会的情况下，如果某位董事试图直接解除财务负责人，且该行为没有法律依据或公司章程的支持，那么该行为可能构成违法或违规，需要承担相应的法律责任。

4. 实际操作中的建议：

   • 在没有董事会的情况下，如果需要解除财务负责人，建议首先查阅公司章程，了解具体的任免程序和职权划分。
   • 如果公司章程没有明确规定，可以咨询法律专业人士或参考相关法律法规，以确保解除行为的合法性和合规性。
   • 在任何情况下，都应当确保解除行为符合公司的整体利益，并避免因个人行为而给公司带来不必要的法律风险。

后续行动建议：

• 如果您是公司的一员，且面临此类情况，建议首先与公司内部的法律顾问或相关部门沟通，了解具体的法律程序和规定。
• 如果您对解除财务负责人的行为存在疑问或担忧，可以直接向我咨询，我会根据您的具体情况提供专业的法律意见和建议。