不转移异地社保在特定情况下确实可能会影响退休待遇。下面我将为您详细解释这个问题。

首先，我们需要明确的是，社保关系的转移主要涉及到养老保险关系的转移。在生活中，由于跳槽、换工作地等情况，我们可能会面临是否需要转移养老保险关系的问题。一般来说，只有在跨省流动或跨制度流动（如从城乡居民基本养老保险转为企业职工基本养老保险）时，才需要在临领取基本养老待遇前转移养老保险关系。

对于不转移社保关系的情况，如果参保人员在多个地方都有参保记录，但并未及时将这些养老保险关系归集到待遇领取地，那么在计算退休待遇时，可能会因为无法全面反映其全部的参保缴费年限和个人账户储存额，而导致退休待遇受到影响。具体来说，未转移的社保关系中的缴费年限和个人账户储存额可能无法被计入最终的退休待遇计算中，从而降低了退休后的养老金水平。

因此，为了保障自己的基本养老保险权益不受损，参保人员在达到基本养老保险待遇领取条件前，应及时归集各地的养老保险关系。这可以通过在临领取养老保险待遇前办理养老保险关系转移接续来实现，一次性将本人名下的各段养老保险关系归集至待遇领取地。

总的来说，不转移异地社保在特定情况下会影响退休待遇。为了避免这种情况的发生，建议参保人员在流动就业时及时关注自己的社保关系转移问题，并在需要时办理相关手续以确保自己的退休待遇不受影响。