您有权拒绝单位未经协商擅自将您调岗至离家远的地方，但具体需结合实际情况和法律规定来判断。以下是对此问题的详细分析：
一、法律依据与原则
协商一致原则：
- 根据《中华人民共和国劳动合同法》第三十五条，用人单位变更劳动合同约定的内容（包括工作地点），应当与劳动者协商一致，并采用书面形式。若未经协商一致，单方面变更工作地点可能构成违约。
合理性判断：
- 工作地点的调整应基于合理性和必要性，如生产经营需要或客观情况发生重大变化。若调整缺乏合理性，如远距离调动导致通勤时间过长、生活成本增加等，严重影响员工的正常生活和工作效率，员工有权拒绝。
特殊情形处理：
- 对于跨市甚至跨省的远距离调动，通常视为对劳动合同的实质性变更，需双方协商一致。若员工不同意，公司不得强制要求。
二、可拒绝的情形及理由
未协商一致：
- 若公司未与您就调岗事宜进行充分沟通并达成一致，您可直接拒绝。
影响个人生活：
- 远距离调动可能导致通勤时间过长、生活成本增加等问题，严重影响您的正常生活和工作效率。在此情况下，您可提出异议并拒绝调岗。
违反合同约定：
- 若劳动合同中明确约定了工作地点，且公司擅自变更该地点，您有权依据合同条款拒绝调岗。
存在其他不合理因素：
- 如调岗后的岗位与原岗位职责差异过大、薪资待遇降低等，您也可据此拒绝。
三、拒绝调岗的可能后果及应对
公司可能的反应：
- 协商解决：公司可能会与您进一步沟通，寻求双方都能接受的解决方案，如调整至其他更合适的岗位、提供交通补贴或安排远程办公等。
- 解除劳动合同：在特定情形下（如经济性裁员、不胜任工作等），公司可能依法解除劳动合同，但需支付经济补偿金。若公司以此为由解除劳动合同，您有权要求公司说明理由并提供相关证据。
- 采取其他措施：如公司坚持调岗且您拒绝，公司可能会采取其他措施，如扣发工资、降职降薪等。这些行为可能构成违法，您有权通过法律途径维权。
您的应对策略：
- 保留证据：妥善保存与公司沟通的记录、劳动合同、工资单、调岗通知等相关文件，以备不时之需。
- 积极沟通：主动与公司人力资源部门或上级领导沟通，表达自身诉求和困难，寻求合理解决方案。在沟通过程中，保持冷静和理性，避免情绪化表达。
- 法律维权：若认为公司的调岗行为侵犯了自身合法权益，您可向当地劳动监察部门投诉或申请劳动仲裁。在申请劳动仲裁时，需提交相关证据证明公司的调岗行为违法或不合理。
四、实际建议
- 在拒绝调岗前，先了解公司的调岗原因和背景：若公司因生产经营需要或客观情况发生重大变化而调岗，且调岗具有合理性和必要性，您可考虑与公司协商解决方案，如调整工作时间、提供交通补贴等。
- 若公司调岗行为明显违法或不合理：如未经协商一致擅自调岗、调岗后岗位与原岗位职责差异过大等，您应坚决拒绝并依法维权。
总之，面对单位调岗至离家远的地方的情况，您有权拒绝，但需结合实际情况和法律规定来判断。在拒绝调岗前，建议先与公司沟通协商；若沟通无果且公司调岗行为违法或不合理，您可依法维权。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。