结论：精神病人网贷高利贷是否可以全部退回，需根据具体情况判断，不能一概而论。以下从多个角度进行分析：
一、精神病人的民事行为能力
完全无民事行为能力：
- 如果精神病人被认定为完全无民事行为能力人，那么其签订的网贷合同通常会被视为无效合同。因为完全无民事行为能力人无法理解自己行为的性质和后果，无法独立进行民事法律行为。
- 在这种情况下，精神病人或其法定代理人有权要求网贷平台退还已支付的款项，并可能不需要承担还款责任。但需注意，如果网贷平台能够证明其在放贷过程中已尽到合理的审查义务，且精神病人或其法定代理人存在过错（如故意隐瞒病情等），则可能需承担一定的责任。
限制民事行为能力：
- 如果精神病人被认定为限制民事行为能力人，那么其签订的网贷合同可能属于效力待定的合同。这取决于其法定代理人是否追认该合同。
- 如果法定代理人追认，则合同有效，精神病人需承担还款责任；如果法定代理人拒绝追认，则合同无效，精神病人或其法定代理人有权要求网贷平台退还已支付的款项。
二、高利贷的认定与处理
高利贷的认定：
- 根据相关法律法规，民间借贷的利率不得超过合同成立时一年期贷款市场报价利率的四倍。超过此限度的，超出部分的利息不予保护。
- 如果网贷平台的利率超过了法定上限，则超出部分的利息可以被认定为高利贷。
高利贷的处理：
- 对于高利贷部分，精神病人或其法定代理人有权拒绝支付超出法定利率的利息。
- 如果已支付超出法定利率的利息，精神病人或其法定代理人有权要求网贷平台退还。但需注意，退还请求需在法定诉讼时效期间内提出。
三、实际操作中的注意事项
证据收集：
- 精神病人或其法定代理人需收集相关证据，如医疗证明、网贷合同、还款记录等，以证明精神病人的民事行为能力状况以及网贷平台的利率情况。
协商与诉讼：
- 在收集到足够证据后，精神病人或其法定代理人可以尝试与网贷平台进行协商，要求退还已支付的款项或调整还款计划。
- 如果协商无果，可以向法院提起诉讼，要求确认合同无效或调整利率，并退还已支付的超出法定利率的利息。
四、法律建议
及时咨询：
- 鉴于精神病人的特殊情况，建议其法定代理人及时咨询专业律师，了解具体法律程序和操作要点。
谨慎处理：
- 在处理此类纠纷时，需谨慎对待每一个环节，确保所有操作都符合法律法规的规定，避免因操作不当而引发不必要的法律风险。
总结：精神病人网贷高利贷是否可以全部退回，需根据精神病人的民事行为能力状况以及网贷合同的利率情况来综合判断。如果涉及高利贷部分，精神病人或其法定代理人有权拒绝支付超出法定利率的利息，并要求网贷平台退还已支付的超出部分。但具体操作需谨慎处理，并建议及时咨询专业律师。