结论：您收取了5万卖房订金后不想卖房，按合约需赔付20万违约金是否合法，这取决于多个因素，包括合同的具体条款、违约金的合理性以及是否存在可调整的情形等。以下从不同角度进行分析：

一、合同条款的效力

1. 合同自由原则：根据《中华人民共和国民法典》的相关规定，合同双方当事人在平等、自愿的基础上，可以约定违约金的数额。如果合同中明确约定了因一方违约需支付20万违约金，且该条款不违反法律、行政法规的强制性规定，不违背公序良俗，那么该条款是有效的。

2. 违约金条款的审查：然而，违约金的数额并非完全由当事人自由约定。如果违约金数额过高或过低，当事人可以请求人民法院或仲裁机构予以调整。具体来说，如果约定的违约金过分高于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以适当减少；如果约定的违约金低于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以增加。

二、违约金的合理性

1. 实际损失考量：在判断违约金是否合理时，需要考虑违约行为给对方造成的实际损失。如果20万违约金远高于您违约给对方造成的实际损失，那么该违约金可能被视为过高，对方请求减少的可能性较大。

2. 行业惯例与公平原则：同时，还需要考虑行业惯例和公平原则。如果合同中约定的违约金数额明显高于同行业类似交易的违约金水平，或者该数额对一方当事人来说显失公平，那么该违约金条款也可能受到挑战。

三、可能存在的调整情形

1. 协商调整：在违约行为发生后，双方可以首先尝试通过协商来调整违约金的数额。如果双方能够达成一致意见，那么可以签订补充协议来修改原合同中的违约金条款。

2. 诉讼或仲裁调整：如果协商不成，对方可以向人民法院提起诉讼或向仲裁机构申请仲裁，请求调整违约金的数额。在诉讼或仲裁过程中，法院或仲裁机构会根据实际情况和法律规定来裁决是否调整违约金以及调整的幅度。

四、建议

1. 审查合同条款：首先，建议您仔细审查合同中的违约金条款，了解约定的具体内容和可能面临的法律后果。

2. 评估实际损失：其次，评估您违约给对方造成的实际损失，以便在协商或诉讼过程中提供有力的证据。

3. 寻求法律帮助：如果您对违约金条款的合法性或合理性存在疑问，或者担心可能面临的法律后果，建议您及时咨询专业律师（即我本人，石田田律师，专注于经济纠纷、房产纠纷等领域），以便获得更具体的法律建议和帮助。

举例说明：假设您与对方签订的房屋买卖合同中明确约定了因您违约需支付20万违约金，且该房屋的市场价值远高于您收取的订金数额。然而，在您违约后，对方实际上并未因您的违约行为遭受重大损失（例如，对方很快找到了其他买家并完成了交易）。在这种情况下，对方请求您支付20万违约金可能被视为过高，您有权请求法院或仲裁机构予以适当减少。