结论前置：根据您描述的情况，如果书面协议明确约定了您对大额存款的所有权或使用权，且该协议合法有效，那么您是有可能通过法律途径要回被他人取走的款项的。不过，具体能否要回还需根据协议内容、取款行为性质及证据情况等多方面因素综合判断。以下是从不同角度的详细分析：

一、协议效力与所有权归属

1. 协议内容：首先，需要审查书面协议的具体内容。如果协议明确约定了存款虽在他人名下，但所有权或使用权归您所有，且该协议是双方真实意思表示，不违反法律、行政法规的强制性规定，那么该协议是合法有效的。

2. 所有权归属：根据协议约定，如果存款所有权确实归您所有，那么他人未经您同意擅自取走存款，就构成了对您的财产权的侵害。

二、取款行为性质

1. 无权处分：如果他人未经您同意，擅自取走您名下（虽实际在他人账户，但根据协议所有权归您）的存款，那么该行为可能构成无权处分。根据《民法典》的相关规定，无权处分他人财产，经权利人追认或者无处分权的人订立合同后取得处分权的，该合同有效；否则，权利人有权要求返还财产。

2. 侵权行为：如果他人取款行为不仅构成无权处分，还给您造成了经济损失，那么该行为还可能同时构成侵权行为。根据《民法典》中关于侵权责任的规定，您有权要求侵权人承担赔偿责任。

三、证据收集与诉讼途径

1. 证据收集：为了证明您对存款的所有权或使用权，以及他人擅自取款的事实，您需要收集相关证据。这些证据可能包括书面协议、存款记录、取款记录、证人证言等。

2. 诉讼途径：如果协商无果，您可以通过诉讼途径来维护自己的权益。具体来说，您可以向法院提起民事诉讼，要求确认存款所有权归您所有，并要求他人返还存款及赔偿损失。在诉讼过程中，您需要充分举证证明自己的主张。

四、特殊情况考虑

1. 协议瑕疵：如果书面协议存在瑕疵，如未明确约定存款所有权归属、协议签订时存在欺诈或胁迫等情形，那么协议的效力可能会受到影响。在这种情况下，您需要咨询专业律师，评估协议效力及可能的风险。

2. 取款行为合法性：如果他人取款行为是基于某种合法原因（如代为保管、执行法院判决等），那么您可能需要通过其他途径来解决问题。例如，如果他人是代为保管您的存款，并按照您的指示取款，那么该行为可能不构成侵权。

建议：鉴于上述分析，我建议您首先收集相关证据，包括书面协议、存款和取款记录等。然后，尝试与对方进行协商，看是否能够达成和解。如果协商无果，您可以考虑通过诉讼途径来维护自己的权益。在整个过程中，如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。