结论：关于您提出的“上班六年，一有借调单位就让我去，这次又调纪委干活，可以不去吗”的问题，这主要取决于借调的合法性、合理性以及您与原单位之间的劳动合同或相关协议的约定。以下是从不同角度进行的分析：

1. 借调的合法性与合理性：

   • 合法性：借调通常需要基于原单位、借调单位和员工三方之间的协商一致，并签订相应的借调协议。如果借调行为没有违反法律法规的强制性规定，且您在借调过程中没有受到不公正的待遇或权益受损，那么借调行为在法律上是合法的。
   • 合理性：借调应当基于工作需要，且不应对您的正常工作和生活造成过大影响。如果借调频繁、时间过长或借调岗位与您的专业技能不符，可能构成不合理借调。

2. 劳动合同与借调协议：

   • 劳动合同：您与原单位签订的劳动合同中可能包含关于借调的条款。如果合同中明确规定了借调的条件、期限和待遇等，那么您应当遵守合同约定。
   • 借调协议：如果原单位与借调单位之间签订了借调协议，且该协议涉及您的权益，那么您也有权了解并遵守协议内容。如果协议中未明确您的权利或义务，或者协议内容违反法律法规，您有权提出异议。

3. 您的权利与选择：

   • 拒绝借调：如果借调行为缺乏合法性或合理性，或者违反了您与原单位之间的劳动合同或借调协议，您有权拒绝借调。但需要注意的是，拒绝借调可能会对您与原单位之间的关系产生影响，甚至可能引发劳动争议。
   • 协商与沟通：在拒绝借调之前，建议您先与原单位进行协商和沟通，了解借调的具体原因、期限和待遇等，并尝试达成共识。如果协商无果，您可以考虑向劳动监察部门投诉或申请劳动仲裁。
   • 法律途径：如果借调行为严重侵犯了您的合法权益，如未经您同意擅自改变工作岗位、降低工资待遇等，您可以通过法律途径维护自己的权益。这包括向劳动争议仲裁委员会申请仲裁或向人民法院提起诉讼。

4. 特殊情况下的考虑：

   • 纪委借调的特殊性：纪委作为党内监督机构，其借调行为可能涉及更为严格的纪律要求和程序。如果您被借调至纪委工作，且认为该借调行为存在不合理或违法之处，建议您在拒绝之前先了解相关纪律规定和程序要求，并咨询专业律师的意见。

建议与行动：

• 在决定是否拒绝借调之前，先仔细审查您与原单位之间的劳动合同和借调协议（如果有的话），了解其中的相关条款和约定。
• 与原单位进行充分的协商和沟通，表达您的关切和诉求，并尝试达成共识。
• 如果协商无果或您认为借调行为存在不合理或违法之处，及时咨询专业律师的意见，并考虑通过法律途径维护自己的权益。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。