结论：是否可以不去签字发票，需结合具体情况判断，主要取决于您在选举中的角色及当地选举程序要求。以下是具体分析：

1. 若您是选民，且已履行投票义务
   根据《村民委员会组织法》规定，选民有权参与投票，但未强制要求必须现场签字确认发票（具体流程以地方规定为准）。若您已通过投票箱完成投票，且选举程序未明确要求选民签字领票，则您有权拒绝签字且不影响选举效力。但需注意：若地方选举细则明确要求选民签字领票，您拒绝签字可能被视为未完成投票程序，需承担相应后果（如被记录为未投票）。

2. 若您是选举工作人员（如监票人、计票人）
   作为选举组织者，您需严格履行职责，包括核对选民身份、发放选票、监督投票等。若发票环节需要您签字确认（如记录选票发放数量），则您无正当理由拒绝签字可能构成失职，需承担法律责任（如选举无效、行政处分等）。根据《村民委员会组织法》第15条，选举工作人员需“忠于职守，遵守纪律”，故意违反程序可能被追究责任。

3. 若您因特殊原因无法签字
   若您因疾病、外出等客观原因无法签字，可提前向选举委员会说明情况并申请委托他人代签或采用其他方式确认（如按手印、录音录像）。根据《村民委员会选举规程》第23条，选举委员会应“为选民行使权利提供便利”，但需以不影响选举公正为前提。

建议行动：

1. 立即查阅本村《选举办法》或咨询选举委员会，明确发票环节的具体要求；
   
2. 若您是选民且已投票，可礼貌拒绝签字并说明理由（如“我已通过投票箱完成投票，无需重复签字”）；
   
3. 若您是工作人员，除非存在法定免责事由（如突发疾病），否则应履行签字义务；
   
4. 保留相关证据（如选举公告、投票记录），以备争议时使用。
   

风险提示：
选举程序具有严格法定性，擅自拒绝签字可能引发争议（如其他选民质疑选举合法性）。若对程序有异议，建议通过合法途径提出（如向乡镇政府反映），而非直接拒绝配合。

如有进一步疑问，可随时向我咨询具体场景下的法律应对方案。