结论：工程款不给发票一般不可以直接拒付钱，但可以采取其他合法方式维护自身权益，具体分情况如下：
- 从合同约定角度
- 如果双方签订的工程合同中明确约定了付款方在收到发票后才支付工程款，那么在付款方未收到发票时，有权按照合同约定暂不支付款项。不过，这并不意味着可以无限期地拒付，一旦收款方提供了符合合同要求的发票，付款方就应当按照合同约定支付工程款。
- 若合同中没有明确约定发票与付款的先后顺序，那么付款方不能仅仅以未收到发票为由拒绝支付工程款。因为支付工程款是合同的主要义务，而开具发票是合同的附随义务，附随义务不能对抗主要义务的履行。在这种情况下，付款方应当先支付工程款，同时可以要求收款方开具发票，如果收款方拒绝开具，付款方可以通过法律途径要求其履行开具发票的义务。
- 从法律规定角度
- 根据相关税收法律法规，收款方有义务向付款方开具发票。但这并不直接赋予付款方拒付工程款的权利。如果付款方因为收款方未开具发票而拒付工程款，可能会被认定为违约行为，需要承担相应的违约责任，比如支付逾期付款利息等。
- 如果付款方已经支付了工程款，但收款方未开具发票，付款方可以向税务机关举报，由税务机关责令收款方开具发票，并可能对收款方进行相应的税务处罚。
建议：
- 对于付款方来说，在签订工程合同时，应当明确约定发票的开具时间、方式以及与付款的先后顺序等内容，以避免后续产生纠纷。在合同履行过程中，如果收款方未按照约定开具发票，可以先与对方进行沟通协商，要求其尽快开具；如果协商无果，可以向税务机关举报或者通过法律途径解决。
- 对于收款方来说，应当按照合同约定和法律规定及时开具发票，以免给自己带来不必要的法律风险。如果因为特殊原因无法及时开具发票，应当及时与付款方沟通说明情况，并协商解决方案。