关于“困难残疾人生活补贴不退回是否合法”的问题，这主要涉及到残疾人两项补贴的管理规定以及相关的法律法规。

首先，从政策层面来看，根据国务院《关于全面建立困难残疾人生活补贴和重度残疾人护理补贴制度的意见》以及后续的相关文件，如《民政部 财政部 中国残联关于加强残疾人两项补贴精准管理的意见》等，都明确指出了残疾人两项补贴的发放原则和管理要求。其中，“应补尽补、应退尽退”是核心原则之一，意味着符合条件的残疾人应当得到补贴，而不符合条件的或者情况发生变化的，则应当及时退出补贴范围。

具体到困难残疾人生活补贴，它是为了补助残疾人因残疾产生的额外生活支出而设立的。当补贴对象的资格发生变化，如死亡、户籍迁移、服刑、收入超过规定标准等，按照政策规定，应当停止发放补贴。如果已经发放了补贴，那么理论上应当退回多领取的部分。

从法律角度来看，如果补贴对象在明知自己不再符合补贴条件的情况下，仍然继续领取补贴而不主动退回，这可能构成不当得利。在法律上，不当得利是需要返还的。因此，不退回困难残疾人生活补贴，在大多数情况下是不合法的。

当然，实际情况可能因地区、具体政策执行等因素有所不同。但总体来说，遵循“应补尽补、应退尽退”的原则，确保补贴的精准发放和有效管理，是保障残疾人合法权益、维护社会公平正义的重要体现。

如果您或您身边的人遇到了类似的问题，建议及时咨询当地的民政部门或残联组织，了解具体的政策规定和操作流程，以便做出正确的处理。