结论：您在单位实际工作了20余年，即使因违规入编被清退且财政工资已退回，您仍然有权要求单位支付相应的劳动报酬。
分析说明：
劳动关系与劳动报酬：
- 劳动关系是劳动者与用人单位之间依法建立的，以劳动为给付内容的社会关系。在劳动关系存续期间，劳动者有权获得与其提供的劳动相对应的报酬，这是劳动法的基本原则。
- 在您的情况下，尽管您可能因违规入编而被清退，但这并不改变您与单位之间实际存在劳动关系的事实。您为单位提供了长达20余年的劳动，因此有权要求单位支付相应的劳动报酬。
违规入编与劳动报酬的支付：
- 违规入编可能涉及行政或纪律处分，但这与劳动报酬的支付是两个不同的法律问题。违规入编的处理不应影响您作为劳动者应享有的基本权利，包括获得劳动报酬的权利。
- 财政工资的退回可能是对违规入编的一种处理方式，但这并不等同于单位可以免除支付您实际工作期间劳动报酬的义务。
劳动报酬的计算与支付：
- 劳动报酬的计算应基于您实际提供的劳动量、劳动质量以及单位内部的薪酬制度等因素。您可以与单位协商确定具体的劳动报酬数额，如果协商不成，可以通过劳动争议调解、仲裁或诉讼等途径解决。
- 单位应按照约定的时间和方式支付您的劳动报酬。如果单位拒绝支付或拖欠支付，您有权要求单位支付拖欠的工资，并可能要求单位支付相应的经济补偿或赔偿金。
行动建议：
- 与单位协商：首先，您可以尝试与单位进行协商，明确您应获得的劳动报酬数额和支付方式。在协商过程中，您可以提供相关证据（如工作记录、考勤记录等）来支持您的主张。
- 寻求劳动争议调解或仲裁：如果协商不成，您可以向当地的劳动争议调解委员会申请调解，或者向劳动争议仲裁委员会申请仲裁。在调解或仲裁过程中，您需要提供充分的证据来证明您的主张。
- 提起诉讼：如果调解或仲裁未能解决争议，您还可以向人民法院提起诉讼，要求单位支付您的劳动报酬。在诉讼过程中，您需要遵循法院的诉讼程序，提供充分的证据来支持您的诉讼请求。
法律后果：
- 如果单位拒绝支付您的劳动报酬，您有权通过法律途径维护自己的合法权益。单位可能面临支付拖欠工资、经济补偿或赔偿金等法律责任。
- 同时，您也应注意保留好相关证据，以便在需要时提供证明。如果因证据不足而导致无法证明自己的主张，您可能会承担不利的法律后果。
如有其他疑问或需要进一步的法律帮助，请直接向我咨询。