仅凭工作业绩不可以直接辞退公务员。以下从多个角度为你详细分析：
公务员辞退的法定条件
根据《中华人民共和国公务员法》的相关规定，公务员有下列情形之一的，予以辞退：
- 在年度考核中，连续两年被确定为不称职的：这里强调的是“连续两年”且“不称职”，而非仅仅基于某一年的工作业绩。工作业绩只是考核的一部分，考核还包括德、能、勤、绩、廉等多个方面。
- 不胜任现职工作，又不接受其他安排的：如果公务员不能胜任当前的工作，且拒绝接受组织安排的其他工作，那么可能会面临辞退。但这同样不是仅仅基于工作业绩的考量。
- 因所在机关调整、撤销、合并或者缩减编制员额需要调整工作，本人拒绝合理安排的：在这种情况下，如果公务员拒绝接受合理的调整安排，也可能被辞退。
- 不履行公务员义务，不遵守法律和公务员纪律，经教育仍无转变，不适合继续在机关工作，又不宜给予开除处分的：这涉及到公务员的职业道德和行为规范，与工作业绩无直接关联。
- 旷工或者因公外出、请假期满无正当理由逾期不归连续超过十五天，或者一年内累计超过三十天的：这是关于公务员工作纪律的规定，同样不是基于工作业绩的辞退条件。
工作业绩与辞退的关系
工作业绩虽然是公务员考核的一个重要方面，但它并不是决定公务员是否被辞退的唯一因素。公务员的考核是一个综合性的评价过程，包括工作业绩、工作能力、工作态度、廉洁自律等多个方面。因此，即使公务员的工作业绩不佳，也不能直接成为辞退的理由。除非这种不佳的工作业绩导致了在年度考核中连续两年被确定为不称职，或者符合其他辞退条件。
辞退公务员的程序
辞退公务员需要遵循一定的程序，包括初步核实、听取本人申辩、集体讨论决定、通知本人并办理相关手续等。这些程序确保了辞退决定的公正性和合法性，也保护了公务员的合法权益。
法律建议
如果你作为公务员，担心自己的工作业绩会影响职业稳定，建议你：
- 努力提升工作业绩：通过不断学习和实践，提高自己的业务能力和工作水平。
- 遵守职业道德和行为规范：保持良好的职业操守和廉洁自律，避免违规违纪行为。
- 积极沟通：如果对自己的工作业绩或考核结果有异议，可以与上级或人事部门进行沟通，了解具体情况并寻求解决方案。
如果你面临辞退等职业危机，或者有任何关于公务员法律问题的疑问，都可以直接向我咨询。我会根据你的具体情况，为你提供专业的法律建议和帮助。