结论：物业公司收取了不是他们合同期限内的物业费，且业主在几年后才知道这一情况，业主是有权要求退回这部分物业费的。
法律背景与解释：
合同相对性原则：物业费是基于物业服务合同产生的费用，合同双方应严格按照合同约定的期限和内容履行。物业公司若收取了超出合同期限的物业费，这超出了其合同权利范围，业主有权拒绝支付或要求退回。
业主知情权：业主作为物业服务合同的接受方，有权了解并监督物业费的收取情况。物业公司有义务向业主公开物业费的收取标准、期限等信息。若物业公司未履行这一义务，导致业主在不知情的情况下支付了超出合同期限的物业费，业主有权要求退回。
不当得利返还：从法律角度来看，物业公司收取超出合同期限的物业费，可能构成不当得利。根据《民法典》的相关规定，因他人没有法律根据，取得不当利益，受损失的人有权请求其返还不当利益。因此，业主有权要求物业公司退回这部分物业费。
法律建议与行动步骤：
收集证据：业主应首先收集相关证据，包括物业服务合同、物业费缴纳凭证、与物业公司的沟通记录等，以证明物业公司收取了超出合同期限的物业费。
与物业公司协商：在收集到足够证据后，业主可以尝试与物业公司进行协商，要求其退回超出合同期限的物业费。协商过程中，业主应保持冷静和理性，明确表达自己的诉求和理由。
寻求法律援助：若协商无果，业主可以寻求法律援助或咨询专业律师（如我），了解具体的法律程序和维权途径。律师将根据业主的具体情况，提供针对性的法律建议和帮助。
提起诉讼：在必要时，业主可以向法院提起诉讼，要求物业公司退回超出合同期限的物业费。诉讼过程中，业主需要提交相关证据，并遵循法院的审理程序。
可能遇到的法律后果：
若物业公司被认定收取了超出合同期限的物业费，且无法提供合理理由，法院可能会判决物业公司退回这部分物业费，并可能承担一定的法律责任（如赔偿业主因此产生的损失）。
若业主在诉讼过程中未能提供充分证据支持其诉求，法院可能会驳回业主的诉讼请求。因此，业主在提起诉讼前应确保收集到足够证据。
进一步思考：
业主在遇到类似情况时，应保持警惕，及时了解并监督物业费的收取情况。若发现物业公司存在违规行为，应及时采取措施维护自己的合法权益。
物业公司也应加强内部管理，确保物业费的收取符合合同约定和法律规定。同时，物业公司应积极与业主沟通，及时解答业主的疑问和关切，以维护良好的物业服务关系。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。