违纪所得一般需要上交国家，但在特定情况下也可能需要退回给受损方。以下是对这一问题的详细分析：

一、违纪所得上交国家的情况

在大多数情况下，违纪所得，特别是涉及贪污、受贿、挪用公款等违法违纪行为的所得，是需要上交国家的。这是因为这些行为不仅违反了党纪国法，也损害了国家和社会的公共利益。根据相关法律法规，违纪所得应当被追缴，并上交国库，以维护法律的尊严和社会的公平正义。

法律依据：

• 根据《中华人民共和国刑法》第六十四条的规定，犯罪分子违法所得的一切财物，应当予以追缴或者责令退赔；对被害人的合法财产，应当及时返还；违禁品和供犯罪所用的本人财物，应当予以没收。没收的财物和罚金，一律上缴国库，不得挪用和自行处理。虽然这一条款主要针对的是犯罪所得，但违纪所得的处理原则与之相似，即应当上交国家。

二、违纪所得退回受损方的情况

在某些特定情况下，违纪所得可能需要退回给受损方。这通常发生在违纪行为直接损害了某个特定个体或组织的合法权益时。例如，如果某人通过违纪行为骗取了他人的财物，那么这些财物在追缴后，应当返还给受损方。

具体情形：

• 合同诈骗：如果违纪行为涉及合同诈骗，且诈骗的财物可以明确识别并追回，那么这些财物应当返还给受损的合同相对方。
• 侵占公司财产：如果违纪行为是侵占公司财产，且这些财产可以被追回，那么它们应当返还给公司，以恢复公司的正常运营和财产状况。

三、处理违纪所得的流程

1. 调查取证：相关部门或机构会对违纪行为进行调查，收集证据，以确定违纪所得的具体数额和来源。
2. 追缴财物：一旦违纪所得被确认，相关部门或机构会采取措施追缴这些财物，包括冻结银行账户、查封财产等。
3. 上交或返还：根据违纪行为的性质和受损方的情况，违纪所得将被上交国家或返还给受损方。
4. 法律制裁：违纪者还将面临相应的法律制裁，包括行政处罚、刑事处罚等。

四、建议与提醒

• 遵守法律法规：无论身处何种岗位，都应严格遵守法律法规，不触碰法律红线，以免给自己和他人带来不必要的麻烦和损失。
• 及时咨询：如果对违纪所得的处理有疑问或需要进一步的法律帮助，可以直接向我咨询，我会根据具体情况提供专业的法律意见。

综上所述，违纪所得的处理方式取决于违纪行为的性质和受损方的情况。在大多数情况下，违纪所得需要上交国家；但在特定情况下，也可能需要退回给受损方。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。