结论：关于“不小心点了送达，扣50元是否可以退回来”的问题，这主要取决于具体的服务合同条款以及相关法律法规的规定，还有扣款的具体原因和性质。以下是从不同角度进行的分析：
服务合同条款：
- 首先，需要查看您与提供送达服务方所签订的服务合同或用户协议。这些合同或协议中通常会明确规定关于送达、扣款、退款等相关条款。
- 如果合同中明确规定了因用户误操作导致的扣款可以退款，或者提供了相应的退款流程，那么您有权要求退款。
- 如果合同中没有明确规定，或者规定较为模糊，那么就需要结合相关法律法规和实际情况进行判断。
相关法律法规：
- 根据《中华人民共和国合同法》的相关规定，合同双方应当遵循公平、诚实信用的原则履行合同义务。如果扣款行为违反了这一原则，或者合同条款存在显失公平的情况，您有权要求撤销或变更合同，并可能获得退款。
- 另外，如果扣款行为涉嫌欺诈、误导消费者等违法行为，您还可以依据《中华人民共和国消费者权益保护法》等相关法律法规进行维权。
扣款的具体原因和性质：
- 如果扣款是因为您确实享受了送达服务，但由于误操作（如误点送达按钮）而导致的，那么退款的可能性可能较小，因为服务方已经提供了服务。
- 如果扣款是因为服务方的系统错误、技术故障或人为操作失误等原因导致的，那么您有权要求退款，并可以与服务方协商解决或向相关部门投诉。
建议：
- 首先，建议您仔细阅读服务合同或用户协议，了解相关条款和规定。
- 其次，您可以与服务方联系，说明情况并要求退款。如果服务方拒绝退款或态度消极，您可以考虑向相关部门投诉或寻求法律援助。
- 在处理此类问题时，建议您保留好相关证据（如扣款记录、服务合同、沟通记录等），以便在需要时提供证明。
后续行动：
- 如果您决定要求退款，可以先尝试与服务方协商解决。如果协商无果，您可以考虑向消费者协会、市场监管部门或相关行业协会投诉。
- 如果扣款金额较大或涉及其他复杂情况，建议您咨询专业律师（即我本人，朱竟业律师，专注于刑事辩护、取保候审、律师会见、经济纠纷、民间借贷、合同纠纷领域），以便更好地维护您的合法权益。