一般情况下，纪检部门来调取材料，相关单位或个人不可以拒绝，但存在一些特殊情况可以依法说明理由并拒绝提供。以下从不同角度为你详细分析：

配合纪检部门调取材料是法定义务

纪检部门肩负着维护党纪、政纪，查处违纪违法行为的重要职责。在履行职责过程中，调取相关材料是获取证据、查明事实的重要手段。根据相关法律法规和党内规定，被调查的单位和个人有义务配合纪检部门的工作，如实提供相关材料。例如，在涉及党员干部违纪违法案件的调查中，其所在单位的人事档案、财务记录等材料，对于查明违纪事实、确定责任至关重要，单位和个人应当积极配合提供。如果不配合，可能会面临相应的纪律处分或法律责任。

特殊情况下可以依法拒绝

1. 材料涉及国家秘密：如果调取的材料属于国家秘密范畴，根据《中华人民共和国保守国家秘密法》的规定，相关单位和个人有义务保守国家秘密。在这种情况下，可以向纪检部门说明材料涉及国家秘密，不能随意提供，并按照法定程序进行处理。例如，某些涉及国防、外交等领域的敏感信息，如果泄露可能会对国家安全和利益造成严重损害，此时可以拒绝提供。
2. 材料涉及个人隐私：当调取的材料涉及个人隐私时，根据相关法律法规，个人隐私受法律保护。如果纪检部门调取的材料涉及他人的个人隐私，且没有合法的授权或程序，相关单位或个人可以拒绝提供。比如，纪检部门要求调取某员工的医疗记录，而该记录涉及员工的个人隐私，且没有得到员工本人的同意或相关法律程序的授权，此时可以拒绝提供。
3. 材料不属于调查范围：如果纪检部门调取的材料与正在调查的案件没有直接关联，不属于调查范围之内，相关单位或个人也可以说明情况并拒绝提供。例如，纪检部门正在调查某党员干部的贪污受贿问题，却要求调取该党员干部无关的婚姻状况材料，此时可以拒绝提供。

拒绝提供材料的注意事项

如果因为上述特殊情况需要拒绝提供材料，应当注意以下几点：

1. 及时沟通：在收到纪检部门调取材料的通知后，如果认为存在不能提供的情形，应当及时与纪检部门沟通，说明理由和依据。
2. 提供证明：为了证明自己的拒绝是合理的，可以提供相关的证明材料，如涉及国家秘密的密级鉴定文件、涉及个人隐私的授权书等。
3. 遵循程序：拒绝提供材料应当遵循法定程序，不能擅自拒绝。如果对纪检部门的调取要求有疑问或异议，可以通过合法途径进行申诉或反映。

如果你在面对纪检部门调取材料时遇到相关问题，或者有其他法律疑问，都可以直接向我咨询，我会为你提供专业的法律建议。