违建材料买卖合同无效且双方都知情的情况下，购房者（或材料购买方）仍然可以起诉要求退款。以下从不同角度对此问题进行详细分析：
一、合同效力分析
无效合同：
- 根据《中华人民共和国民法典》第一百五十三条，违反法律、行政法规的强制性规定的民事法律行为无效。违建材料的买卖，因其违反了城乡规划、建设管理等相关法律法规的强制性规定，因此该买卖合同通常被视为无效合同。
财产返还：
- 无效的民事法律行为自始没有法律约束力。基于无效合同取得的财产，应当予以返还。这意味着，如果购房者（或材料购买方）已经支付了款项，而卖方尚未交付材料或交付的材料不符合约定，购房者有权要求卖方退还已支付的款项。
二、法律责任分析
卖方责任：
- 如果卖方明知材料是违建所需却故意隐瞒并售卖，构成欺诈或重大过错，应承担退款责任并赔偿购房者的相关损失，如利息损失、交易费用等。
- 卖方需退还购房者支付的全部款项，并可能面临额外的赔偿责任。
双方过错分担：
- 如果购房者在购买时也知晓材料是用于违建，则双方对合同无效均存在过错。
- 在此情况下，虽然购房者仍有权要求退还已支付的款项，但可能需要根据双方的过错程度分担部分因交易产生的合理费用，如运输费、仓储费等。不过，这种分担通常不会影响购房者要求退还主要款项的权利。
三、实际诉讼建议
准备充分证据：
- 购房者在提起诉讼前，应收集买卖合同、付款凭证、材料违建的相关证明（如城乡规划部门的处罚决定书、认定违建的通知等）等关键证据，以支持自己的诉求。
注意诉讼时效：
- 购房者应在知道或应当知道权利被侵害之日起三年内提起诉讼，以免超过诉讼时效而丧失胜诉权。
寻求专业帮助：
- 鉴于违建材料买卖案件的复杂性，建议购房者咨询专业律师，根据自身情况制定合适的诉讼策略。律师可以协助购房者收集证据、撰写起诉状、参与庭审等，提高诉讼效率和胜诉率。
四、特殊情况处理
- 如果材料在交付前已被政府查处或发生其他意外情况，导致无法交付或使用，购房者的退款诉求将更加复杂。此时，需根据具体情况分析责任归属，如卖方是否已尽到合理的告知义务、购房者是否已采取合理的措施防止损失扩大等。
- 若因违建材料买卖导致购房者产生了其他额外损失，如因使用违建材料而遭受的行政处罚、因拆除违建而产生的费用等，购房者在起诉时也可以一并要求卖方赔偿。
总结与建议：
违建材料买卖合同无效且双方都知情的情况下，购房者仍然可以起诉要求退款。在提起诉讼前，购房者应准备充分证据、注意诉讼时效，并寻求专业律师的帮助。同时，购房者也应了解自己的过错程度可能对退款金额产生的影响，并做好相应的心理准备。如果在此过程中遇到任何法律问题或需要进一步的法律建议，可以直接向我咨询。