结论：退休工人本身已不属于劳动法意义上的“劳动者”，因此不存在“按合同辞退退休工人”是否合法的问题。但若退休工人被返聘或从事其他有合同约束的工作，是否可按合同解除关系需视具体情况而定。以下分情况详细说明：
一、退休工人已享受养老保险待遇或领取退休金的情况
法律关系：根据《最高人民法院关于审理劳动争议案件适用法律问题的解释（一）》第三十二条，用人单位与其招用的已经依法享受养老保险待遇或者领取退休金的人员发生用工争议而提起诉讼的，人民法院应当按劳务关系处理。这意味着，退休工人与用人单位之间不再构成劳动关系，而是劳务关系。
合同解除：在劳务关系中，双方的权利义务主要由合同约定。因此，是否可以按合同解除关系，需看合同中是否有相关约定。如果合同中有明确约定解除条件或方式，且该约定不违反法律法规的强制性规定，那么双方可以按照合同约定解除关系。
合法性判断：若合同中没有相关约定，或者约定违反法律法规的强制性规定，那么用人单位单方面解除关系可能构成违约，需要承担相应的违约责任。但无论如何，这种解除关系的行为都不属于“辞退”，因为双方之间不存在劳动关系。
二、退休工人未享受养老保险待遇或领取退休金，但被返聘的情况
法律关系：如果退休工人虽然达到退休年龄，但并未享受养老保险待遇或领取退休金，且被用人单位返聘继续工作，那么他们与用人单位之间仍然可能构成劳动关系（具体需根据地方性法规和实际情况判断）。不过，在大多数情况下，这种返聘关系更倾向于被视为劳务关系，尤其是当双方明确约定了工作内容、报酬等条款时。
合同解除：与上述第一种情况类似，如果双方构成劳务关系，那么合同解除需遵循合同约定。如果构成劳动关系（尽管这种情况较少见），则需遵循《劳动合同法》等相关法律法规的规定，如提前通知、支付经济补偿等。
合法性判断：在构成劳务关系的情况下，合法性判断主要依据合同约定；在构成劳动关系的情况下，则需遵循相关法律法规的规定。无论如何，用人单位都不能随意“辞退”退休工人，否则可能面临法律责任。
三、建议与注意事项
明确法律关系：对于退休工人被返聘或从事其他有合同约束的工作的情况，建议双方在签订合同时明确法律关系（是劳动关系还是劳务关系），并约定好合同解除的条件和方式。
遵守法律法规：无论双方构成何种法律关系，都应遵守相关法律法规的规定。用人单位不得随意解除与退休工人的关系，否则可能面临法律责任；退休工人也应履行好自己的合同义务，否则可能承担违约责任。
咨询专业律师：如果双方在合同解除问题上存在争议或纠纷，建议及时咨询专业律师以获取更具体的法律建议和帮助。
如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询。