结论前置：委托协议书中的仲裁条款对委托人而言并非“无所谓”，其效力及影响需根据具体情况分析。以下从多个角度详细说明：

1. 仲裁条款的效力

• 法律约束力：根据《中华人民共和国仲裁法》第十六条，仲裁条款是双方当事人自愿将争议提交仲裁解决的书面约定，具有法律约束力。一旦签订，即视为双方同意通过仲裁而非诉讼解决争议。
• 排除诉讼：仲裁条款的存在通常意味着双方放弃了通过法院诉讼解决争议的权利。除非仲裁条款无效（如违反法定情形），否则法院将不予受理因该协议产生的争议。

2. 委托人“无所谓”的可能后果

• 被动接受仲裁：若委托人未在签订协议时明确反对仲裁条款，或未在协议签订后通过协商修改条款，则可能被迫接受仲裁程序，包括仲裁机构的选择、仲裁规则的适用等，这些均可能影响委托人的权益。
• 仲裁成本与风险：仲裁程序虽具有高效、保密等优点，但也可能涉及较高的仲裁费用、律师费等成本。此外，仲裁裁决通常为一裁终局，委托人若对裁决结果不满，难以通过上诉等途径寻求救济。

3. 委托人应如何应对

• 审慎审查条款：在签订委托协议书前，委托人应仔细审查仲裁条款，确保其内容明确、合法，并符合自身利益。如有疑问，应及时向专业律师咨询。
• 协商修改条款：若委托人对仲裁条款有异议，可与对方协商修改或删除该条款，或约定更有利于自身的仲裁规则（如选择更中立的仲裁机构、约定仲裁费用分担方式等）。
• 保留诉讼权利：在特定情况下，委托人可与对方约定“仲裁与诉讼并行”或“仲裁不成可诉讼”等条款，以保留通过诉讼解决争议的权利。但需注意，此类条款可能因违反仲裁的“一裁终局”原则而被认定为无效。

4. 特殊情况下的仲裁条款效力

• 格式条款问题：若仲裁条款为格式条款（即一方预先拟定且未与对方协商的条款），根据《民法典》第四百九十六条，提供格式条款的一方应遵循公平原则确定当事人之间的权利和义务，并采取合理方式提示对方注意免除或减轻其责任等与对方有重大利害关系的条款。若未履行提示或说明义务，对方可主张该条款不成为合同的内容。
• 无效情形：根据《仲裁法》第十七条，仲裁条款可能因约定不明、选定的仲裁机构不存在或仲裁事项超出法律规定的仲裁范围等情形而无效。此外，若一方以欺诈、胁迫手段或乘人之危使对方在违背真实意思的情况下订立仲裁条款，该条款也可能被撤销。

总结与建议：委托协议书中的仲裁条款对委托人而言并非“无所谓”，其效力及影响需根据具体情况分析。委托人应审慎审查仲裁条款，必要时与对方协商修改或删除该条款，或约定更有利于自身的仲裁规则。如有疑问或需进一步帮助，请直接向我咨询。