您可以明确拒绝公司不合理的工作安排，同时注意保留相关证据以维护自身权益。以下从不同角度为您详细分析：
从劳动合同角度：
- 根据《劳动合同法》规定，劳动合同中应当明确约定工作地点。如果公司未经您同意，单方面安排您去其他地方工作，属于变更劳动合同内容。根据法律规定，变更劳动合同需要双方协商一致，并以书面形式确认。因此，您有权拒绝公司单方面变更工作地点的安排。
- 如果公司以“优化”为名，实际上是想解除与您的劳动合同，那么公司必须按照《劳动合同法》的规定，支付相应的经济补偿。经济补偿的标准根据您在公司的工作年限和月工资来确定。
从实际操作角度：
- 明确拒绝：您可以向公司人力资源部门或上级领导明确表达您不愿意接受异地工作安排的态度，并说明理由，如家庭原因、生活不便等。
- 要求书面通知：如果公司坚持要求您去其他地方工作，您可以要求公司出具书面通知，明确工作地点、工作内容、薪资待遇等关键信息。这有助于您在后续维权过程中提供证据。
- 保留证据：在沟通过程中，注意保留与公司的沟通记录，如邮件、短信、微信聊天记录等。这些证据在后续可能发生的劳动争议中非常重要。
从维权途径角度：
- 协商：首先尝试与公司进行协商，寻求双方都能接受的解决方案。例如，公司是否可以提供额外的补贴或福利来弥补您因异地工作带来的不便。
- 投诉：如果协商无果，您可以向当地劳动监察部门投诉公司的违法行为。劳动监察部门有权对公司进行调查，并责令公司改正违法行为。
- 仲裁或诉讼：如果投诉仍未解决问题，您可以向劳动争议仲裁委员会申请仲裁，或者向人民法院提起诉讼。在仲裁或诉讼过程中，您需要提供充分的证据来支持自己的主张。
建议：在处理此类问题时，建议您保持冷静和理性，不要与公司发生直接冲突。同时，及时咨询专业人士（如我）的意见，以便更好地维护自己的合法权益。如果您有任何疑问或需要进一步的帮助，请随时向我咨询。