施工单位没有休息不一定不违法，这取决于具体的工作安排和法律规定是否得到遵守。以下从几个方面进行详细分析：
法定休息日与工作时间：
- 根据《劳动法》及相关规定，劳动者享有休息休假的权利。用人单位应当保证劳动者每周至少休息一日，且每日工作时间一般不超过八小时，平均每周工作时间不超过四十四小时。如果施工单位没有安排劳动者休息，且工作时间超出了法定标准，那么这种行为就是违法的。
特殊工时制度：
- 在某些特殊情况下，如建筑、交通等行业的连续作业，或者受季节和自然条件限制的行业，用人单位可能实行不定时工作制或综合计算工时工作制。但即使实行这些特殊工时制度，也需要经过劳动行政部门的批准，并且要确保劳动者的平均工作时间和休息休假权利不受侵害。如果未经批准或违反规定，施工单位不安排休息仍然可能构成违法。
加班与加班费：
- 如果施工单位因为工作需要安排劳动者加班，那么应当按照法律规定支付加班费。加班时间也有严格的限制，一般每日不得超过一小时，特殊原因下每日不得超过三小时，每月不得超过三十六小时。如果施工单位未支付加班费或加班时间超出法定限制，同样构成违法。
劳动者权益保护：
- 劳动者有权拒绝用人单位的违法安排，包括超时工作和不安排休息等。如果施工单位强迫劳动者违法工作，劳动者可以向劳动监察部门投诉或寻求法律援助。
针对您的情况，我给出以下建议：
- 首先，了解施工单位的工作安排是否符合法定工作时间和休息日的规定。
- 如果发现施工单位存在违法行为，如超时工作、不安排休息或未支付加班费等，可以与施工单位协商解决，要求其改正违法行为。
- 如果协商无果，可以向当地的劳动监察部门投诉，寻求行政部门的帮助。
- 在必要时，也可以寻求法律援助或提起诉讼，维护自己的合法权益。
最后需要强调的是，劳动者的休息休假权利是受到法律保护的，施工单位应当严格遵守相关法律法规，合理安排劳动者的工作和休息时间。如果您在劳动权益方面遇到任何问题，都可以直接向我咨询，我会根据您的具体情况提供专业的法律建议。