如果到开庭时都没人通知被告，这显然是不符合法定程序的，被告应当采取以下措施来维护自己的合法权益：
立即联系法院：
- 被告应尽快与负责审理案件的法院取得联系，了解开庭的具体情况，包括开庭时间、地点、案由等。
- 可以通过电话、邮件或亲自前往法院的方式与法院沟通，确保自己能够及时获得开庭通知。
核实通知情况：
- 被告可以要求法院提供开庭通知的送达记录，以确认是否已经依法向自己送达了开庭通知。
- 如果法院确实未送达或送达存在瑕疵，被告可以据此提出异议，要求法院重新安排开庭时间或采取其他补救措施。
了解法律后果：
- 根据《中华人民共和国刑事诉讼法》及相关司法解释的规定，法院在开庭前应当依法向被告人送达开庭通知。如果未依法送达，可能导致开庭程序违法，进而影响案件的公正审理。
- 被告有权要求法院保障其合法的诉讼权利，包括获得开庭通知的权利。如果法院未履行这一义务，被告可以依法提出申诉或控告。
准备应诉材料：
- 在等待法院进一步通知的同时，被告应积极准备应诉材料，包括答辩状、证据材料等，以便在开庭时能够充分陈述自己的意见和理由。
- 如果被告因未收到开庭通知而未能及时准备应诉材料，可以在开庭时向法院说明情况，并请求法院给予一定的宽限期来准备材料。
考虑法律援助：
- 如果被告对法律程序不熟悉或无法自行处理相关事务，可以考虑寻求法律援助或聘请律师代理诉讼。
- 律师可以协助被告与法院沟通、准备应诉材料、参加庭审等，确保被告的合法权益得到充分保障。
可能的情况分析：
如果法院确实未送达开庭通知：
- 被告可以据此向法院提出异议，要求法院重新安排开庭时间，并确保开庭通知能够依法送达。
- 如果因此导致被告未能及时参加庭审，被告可以依法申请延期审理或提出其他补救措施。
如果法院已送达但被告未收到：
- 可能是送达过程中出现了问题，如邮寄地址错误、联系方式变更等。
- 被告应尽快与法院沟通，说明情况，并提供正确的联系方式和地址，以便法院能够重新送达开庭通知。
行动建议：
- 被告应保持冷静，不要因未收到开庭通知而惊慌失措。
- 立即与法院取得联系，了解开庭情况，并核实通知的送达情况。
- 积极准备应诉材料，确保在开庭时能够充分陈述自己的意见和理由。
- 如有需要，考虑寻求法律援助或聘请律师代理诉讼。
总之，如果到开庭时都没人通知被告，被告应立即采取行动，与法院沟通并核实通知情况，同时积极准备应诉材料，确保自己的合法权益得到充分保障。如果有任何疑问或需要进一步的法律帮助，可以直接向我咨询。