不可以不去。当交警通知协助调查时，即使您不是肇事者，也有义务配合交警的工作。以下是从不同角度对此问题的详细分析：

一、法律义务角度

根据《中华人民共和国道路交通安全法》及相关规定，公民有义务配合公安机关交通管理部门的调查工作。这包括提供与事故相关的信息、证据，以及接受必要的询问等。因此，当交警通知您协助调查时，您应当积极配合，不得拒绝或逃避。

二、协助调查的重要性

1. 查明事实真相：协助调查有助于交警更全面地了解事故经过，查明事实真相，从而作出更准确的责任认定。
2. 保护自身权益：如果您不是肇事者，但拒绝协助调查，可能会引发不必要的误解或怀疑，甚至可能对您自身的权益产生不利影响。
3. 维护社会秩序：配合交警的调查工作，有助于维护社会秩序和公共安全，促进社会的和谐稳定。

三、可能面临的法律后果

如果您拒绝配合交警的调查工作，可能会面临以下法律后果：

1. 被强制传唤：根据《中华人民共和国治安管理处罚法》的相关规定，公安机关有权对拒绝配合调查的人员进行强制传唤。
2. 承担法律责任：如果您的行为构成妨碍公务或拒绝执行职务等违法行为，可能会受到行政处罚，甚至可能承担刑事责任。

四、建议与措施

1. 积极配合：当交警通知您协助调查时，您应当积极配合，如实提供相关信息和证据。
2. 保留证据：如果您认为自己的权益可能受到侵害，可以在配合调查的同时，保留相关证据以备不时之需。
3. 咨询专业律师：如果您对交警的调查工作或责任认定有异议，可以咨询专业律师，了解自己的权利和义务，以及可能的法律途径。

总结：当交警通知您协助调查时，即使您不是肇事者，也有义务配合交警的工作。拒绝配合可能会面临法律后果，并可能对您自身的权益产生不利影响。因此，建议您积极配合交警的调查工作，并在必要时咨询专业律师。如果您有任何法律问题或疑虑，可以直接向我咨询。