结论：在您描述的情况下，能否要到违约金取决于多个因素，包括双方是否有书面或口头的有效约定、对方不履行的原因以及您能否提供相关证据等。以下从不同角度为您详细分析：
一、违约金约定的有效性
书面约定：如果双方在交付定金时，有书面文件（如收据、备忘录等）明确约定了违约金条款，且该条款不违反法律法规的强制性规定，那么该违约金约定是有效的。在此情况下，如果对方不履行卖房义务，您有权要求对方按照约定支付违约金。
口头约定：如果双方只是口头约定了违约金，虽然口头合同在法律上也是有效的，但在实际操作中，口头约定的证明难度较大。如果对方否认口头约定的存在，您需要提供其他证据（如证人证言、录音录像等）来证明口头约定的内容。
二、对方不履行的原因
对方违约：如果对方无正当理由拒绝履行卖房义务，构成违约，您有权要求对方承担违约责任，包括支付违约金（如果约定了的话）和赔偿因违约造成的损失。
不可抗力或情势变更：如果对方因不可抗力（如自然灾害、政府政策变化等）或情势变更（如市场价格大幅波动等）导致无法履行卖房义务，且这些原因在双方签订合同时无法预见、无法避免且无法克服，那么对方可能不承担违约责任。但在此情况下，您仍有权要求对方返还已支付的定金。
三、证据的提供
无论双方是否有书面约定，您都需要提供相关证据来证明自己的主张。这些证据可能包括：
四、法律建议
尝试协商：首先，您可以尝试与对方协商，看能否就违约金问题达成一致意见。如果协商成功，可以签订书面协议以明确双方的权利义务。
寻求法律途径：如果协商无果，您可以考虑通过法律途径解决纠纷。您可以向法院提起诉讼，要求对方支付违约金和赔偿损失。在诉讼过程中，您需要提供充分的证据来支持自己的主张。
注意诉讼时效：根据《中华人民共和国民法典》的规定，向人民法院请求保护民事权利的诉讼时效期间为三年。因此，您需要在知道或应当知道权利受到损害之日起三年内提起诉讼。
最后，由于每个案件的具体情况都不同，且法律适用也可能因地区而异，因此建议您在处理此类纠纷时咨询专业律师（即向我咨询）以获取更具体的法律建议。如果您有任何疑问或需要进一步的帮助，请随时向我提问。