针对您提出的“综合工时制可以不去加班吗”这一问题，我将结合相关法律法规和实际情况，为您进行详细解答。
首先，我们需要明确综合工时制的特点。综合工时制是一种特殊的工作时间制度，它允许在一定周期内（如周、月、季、年）灵活安排工作时间，但总的工作时间不得超过法定标准工作时间。在综合计算周期内，如果总的工作时间超过了法定标准，那么超出部分应被视为延长工作时间，用人单位需要按照规定支付加班工资。
接下来，我们分析劳动者在综合工时制下是否有权拒绝加班。根据《中华人民共和国劳动法》的相关规定，用人单位由于生产经营需要，经与工会和劳动者协商后，可以延长工作时间。但这里有几个关键点需要注意：
协商原则：用人单位在安排加班时，必须与工会和劳动者进行协商，并取得他们的同意。这意味着劳动者在协商过程中有权表达自己的意愿，包括是否接受加班。
限制条件：即使经过协商，用人单位延长工作时间也有一定的限制。一般每日不得超过一小时；因特殊原因需要延长工作时间的，在保障劳动者身体健康的条件下，延长工作时间每日不得超过三小时，但是每月不得超过三十六小时。
劳动者权益：如果用人单位未经协商或违反上述限制条件安排加班，劳动者有权拒绝。因为这属于用人单位违反工时制度及加班规定的行为。
特殊情况：然而，也存在一些特殊情况。如果用人单位因生产经营需要，且与工会和劳动者协商后，在法定标准工作时间以外安排工作，并按照规定支付了相应的加班工资等报酬，那么劳动者通常不能随意拒绝。因为这种情况下，加班是双方协商一致的结果，且劳动者已经获得了相应的补偿。
综上所述，劳动者在综合工时制下是否有权拒绝加班，取决于用人单位安排加班是否符合法律规定及相关程序。如果用人单位未经协商或违反限制条件安排加班，劳动者有权拒绝；如果符合规定且劳动者已经获得了相应的补偿，那么劳动者应按照安排履行劳动义务。
因此，我建议您在面对加班问题时，首先了解用人单位的安排是否符合法律规定，并与用人单位进行充分沟通。如果认为用人单位的安排不合理或违反了法律规定，您可以向相关部门提请劳动争议仲裁以维护自己的合法利益。