针对“两人诈骗50万已退还20万怎么处理”的问题，以下是我的详细解答：

首先，从法律角度来看，诈骗50万属于数额特别巨大的情形。根据《刑法》的相关规定，诈骗公私财物，数额特别巨大或者有其他特别严重情节的，法定刑是处十年以上有期徒刑或者无期徒刑，并处罚金或者没收财产。

在这个案例中，两人已经退还了20万，这可以被视为一个从轻处罚的情节。法院在量刑时，会综合考虑犯罪性质、退赃行为对损害结果的弥补程度、退赃的数额及主动程度等多种情况。具体来说，若全部退赃、退赔，可减少基准刑的30%以下；部分退赃退赔的，会按相应比例减少基准刑。不过，退赃20万具体从轻幅度还需结合全案来判断。

此外，如果两人在诈骗过程中有自首、立功等其他情节，也会影响最终的量刑。自首可以从轻或减轻处罚，立功则可能获得更轻的刑罚。

然而，尽管退还了部分赃款，但由于诈骗数额仍然巨大，因此两人仍可能面临较重的刑罚。具体的判决结果需要由法院根据案件的具体情况和相关法律规定来做出。

除了法律层面的处理，两人还需要承担对被害人的民事赔偿责任。他们应该积极与被害人协商赔偿事宜，尽力弥补被害人的损失。

综上所述，两人诈骗50万已退还20万的情况，在法律上仍可能面临较重的刑罚，并需要承担对被害人的民事赔偿责任。具体的处理结果需要由法院根据案件的具体情况和相关法律规定来做出判决。同时，两人也应该深刻反思自己的行为，积极改正错误，争取早日回归社会。