在法庭辩论终结后才知道回避制度的情况，确实较为特殊，也可能对案件的公正性产生一定影响。以下是对此问题的详细分析：
了解回避制度的含义与重要性：
- 回避制度是指，在司法程序中，如果某一人员与案件存在利害关系或其他可能影响公正处理的因素，该人员应当主动回避或根据当事人的申请回避。
- 回避制度的目的是确保司法程序的公正性和独立性，防止因个人偏见、利益冲突等因素而影响案件的公正处理。
分析法庭辩论终结后才知道回避制度的影响：
- 如果在法庭辩论终结后才了解到回避制度，并且发现存在应当回避而未回避的情况，那么这可能对案件的公正性产生质疑。
- 特别是在关键证据、事实认定或法律适用等方面，如果回避人员参与了讨论或决策，那么这些部分可能受到不公正因素的影响。
探讨可能的法律后果与救济途径：
- 根据具体法律规定和案件情况，如果确实存在应当回避而未回避的情形，并且这种情形可能影响了案件的公正处理，那么当事人有权提出异议或上诉。
- 法院在审查后，如果认为异议成立，可能会采取重新审理等救济措施，以确保案件的公正性。
建议与后续行动：
- 首先，建议尽快与律师沟通，详细了解回避制度的具体内容和适用条件，以及当前案件是否存在应当回避而未回避的情况。
- 如果确实存在这样的问题，律师可以协助你准备相关的法律文件，如异议书或上诉状，并代表你与法院进行沟通。
- 同时，也可以考虑向相关监管部门或行业协会反映情况，以维护司法程序的公正性和独立性。
综上所述，法庭辩论终结后才知道回避制度确实是一个棘手的问题，但并非没有解决之道。通过及时了解回避制度的含义与重要性、分析其对案件公正性的影响、探讨可能的法律后果与救济途径，并采取相应的建议与后续行动，你可以尽可能地维护自己的合法权益和案件的公正性。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。