被告缺席时，法院会根据案件的具体性质和法律规定进行不同的处理。以下是从刑事案件和民事案件两个角度进行的详细分析：
刑事案件中被告缺席的处理
普通程序：
- 在刑事诉讼的普通程序中，如果被告人经依法传唤无正当理由拒不到庭，法院一般不会直接进行缺席审判。这是因为刑事诉讼涉及对被告人的人身自由甚至生命权的剥夺，必须确保被告人的诉讼权利得到充分保障。
- 如果被告人因逃避审判而长期潜逃在外，导致案件无法及时审结，法院可能会采取中止审理或公告送达等措施，待被告人到案后再恢复审理。
特殊程序：
- 根据《中华人民共和国刑事诉讼法》的相关规定，对于贪污贿赂犯罪、严重危害国家安全犯罪、恐怖活动犯罪等重大犯罪案件，在符合一定条件下（如犯罪嫌疑人、被告人在境外，监察机关、公安机关移送起诉且人民检察院认为犯罪事实已经查清、证据确实充分等），可以适用缺席审判程序。
- 缺席审判程序由犯罪地、被告人离境前居住地或者最高人民法院指定的中级人民法院组成合议庭进行审理。在审理过程中，法院会依法保障被告人的诉讼权利，如通过国际条约规定的司法协助方式或者受送达人所在地法律允许的其他方式送达文书、听取辩护人意见等。
- 若经审理认定被告人有罪，法院将作出有罪判决；若证据不足或不能认定被告人有罪的，则作出无罪判决。
自诉案件：
- 在自诉案件中，如果被告人下落不明，法院通常会说服自诉人撤回起诉，或者裁定驳回起诉。这是因为自诉案件通常涉及较轻的犯罪行为，且自诉人需要承担举证责任。在被告人缺席的情况下，自诉人往往难以完成举证任务，因此法院不会轻易进行缺席审判。
民事案件中被告缺席的处理
一般情况：
- 在民事诉讼中，如果被告经传票传唤无正当理由拒不到庭，或者未经法庭许可中途退庭，法院可以缺席判决。这意味着即使被告没有出庭参加诉讼，法院也可以根据原告提供的证据和事实情况作出判决。
判决依据：
- 法院在缺席判决时会根据原告提供的证据和诉讼请求进行审查。如果原告提供的证据足以证明其主张的事实成立，且符合法律规定，法院将支持原告的诉讼请求并作出相应判决。
特殊情况处理：
- 必须到庭的被告：对于负有赡养、抚育、扶养义务或不到庭就无法查清案情的被告，若经两次传票传唤仍无正当理由拒不到庭，法院有权对其采取拘传措施，强制其到庭参加诉讼。
- 反诉处理：如果被告在诉讼过程中提出了反诉请求，但缺席庭审，其反诉可能会被法院按撤诉处理。
- 下落不明或无法送达的情况：若被告下落不明或用其他方式无法送达，法院将通过公告方式送达相关文书，并说明案件情况、开庭时间、地点等。公告期满后，若被告仍未到庭应诉，法院将进行缺席审判。
后续处理：
- 如果被告对缺席判决不服，可以在规定的时间内提起上诉。上诉期间内，一审判决不生效。二审法院将对案件进行全面审查，并根据审查结果作出维持原判、改判或发回重审的裁定。
总结与建议：
被告缺席时，法院的处理方式会根据案件的具体性质和法律规定有所不同。在刑事案件中，法院会尽量保障被告人的诉讼权利，避免直接进行缺席审判；在民事案件中，法院则可能根据原告提供的证据和事实情况作出缺席判决。因此，作为被告，应当积极应诉，按时出庭，并充分行使自己的诉讼权利，以避免不利的法律后果。若因特殊情况无法到庭，应及时与法院联系并说明情况，申请延期审理等。
如有任何法律疑问或需要进一步的法律帮助，请随时向我咨询。