服务员把客人四万块钱扔了，服务员及所在单位应当承担相应的法律责任。具体处理方式如下：
法律责任认定：
- 服务员作为直接行为人，因其过失导致客人财物损失，应依法承担赔偿责任。根据《中华人民共和国民法典》的相关规定，侵害物权造成损害的，权利人可以请求损害赔偿。
- 服务员所在单位（如酒店、餐厅等）作为雇主，通常也需对员工的职务行为承担一定的法律责任。单位应当加强对员工的管理和培训，以避免类似事件的发生。
赔偿方式与途径：
- 双方协商：首先，客人可以与服务员及其所在单位进行协商，就赔偿事宜达成一致意见。协商过程中，双方应本着公平、合理的原则，就赔偿金额、方式等具体问题进行讨论。
- 提起诉讼：如果协商无果，客人可以依法向人民法院提起诉讼，要求服务员及其所在单位承担赔偿责任。在诉讼过程中，客人需要提供相关证据，证明自己的财物损失以及损失与服务员的过失行为之间的因果关系。
赔偿金额确定：
- 赔偿金额应基于客人实际损失的四万块钱进行确定。如果双方对赔偿金额有争议，可以通过评估机构对损失进行评估，或者由法院根据证据和法律规定进行裁决。
预防措施与建议：
- 对于服务员而言，应提高职业素养和责任心，在打扫卫生时仔细检查并妥善保管客人的财物，避免误扔或损坏。
- 对于客人而言，建议在离开房间或场所前自行检查财物是否安全放置，并告知服务员相关注意事项，以减少不必要的纠纷。
- 对于单位而言，应建立健全内部管理制度和员工培训机制，提高员工的服务质量和法律意识，降低类似事件的发生概率。
综上所述，服务员把客人四万块钱扔了是一个严重的过失行为，服务员及其所在单位应承担相应的法律责任。客人可以通过协商或诉讼途径寻求赔偿，并应采取措施预防类似事件的再次发生。如果您在此过程中遇到任何法律问题或需要进一步的帮助，请随时向我咨询。