结论：前夫不给孩子钱却有钱给“小四”用，这一行为可能涉及违法，具体需结合实际情况判断，主要可能涉及拒不执行判决、裁定罪或遗弃罪（若情节严重），同时也可能违反道德规范。以下从法律和道德两个角度进行详细分析：
法律角度
拒不执行判决、裁定罪：
- 如果前夫与您在离婚时，法院已经就孩子的抚养费问题作出了判决或裁定，且该判决或裁定已经生效，那么前夫有义务按照判决或裁定的内容支付抚养费。
- 如果前夫有能力支付却拒不支付，且情节严重（如长期拖欠、数额较大等），则可能构成拒不执行判决、裁定罪。根据《中华人民共和国刑法》第三百一十三条的规定，对人民法院的判决、裁定有能力执行而拒不执行，情节严重的，处三年以下有期徒刑、拘役或者罚金；情节特别严重的，处三年以上七年以下有期徒刑，并处罚金。
遗弃罪（若情节严重）：
- 如果前夫不仅不给孩子钱，还对孩子的生活、教育等漠不关心，甚至拒绝抚养孩子，导致孩子生活无着落，那么这种行为可能构成遗弃罪。但需要注意的是，遗弃罪的构成需要情节严重，如导致孩子重伤、死亡或造成其他严重后果。
- 根据《中华人民共和国刑法》第二百六十一条的规定，对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的，处五年以下有期徒刑、拘役或者管制。
民事责任：
- 即使前夫的行为不构成犯罪，您仍然可以通过民事诉讼的方式要求前夫支付拖欠的抚养费。法院会根据实际情况判决前夫支付相应的抚养费，并可能要求其承担诉讼费用等。
道德角度
- 从道德层面来看，前夫作为孩子的父亲，有义务为孩子提供必要的生活和教育条件。不给孩子钱却有钱给“小四”用，这种行为显然违背了基本的道德准则和家庭责任。
- 这种行为也可能对孩子的心理造成负面影响，影响孩子的健康成长。
建议
收集证据：
- 如果您打算通过法律途径维护孩子的权益，建议先收集相关证据，如法院的判决或裁定书、前夫的收入证明、转账记录等，以证明前夫有能力支付抚养费却拒不支付。
与前夫沟通：
- 在采取法律行动之前，您可以尝试与前夫进行沟通，了解其拒不支付抚养费的原因，并尝试协商解决。如果沟通无果，再考虑采取法律手段。
寻求法律帮助：
- 如果您需要进一步的法律帮助或咨询，可以直接向我提问。我会根据您的具体情况提供专业的法律建议和帮助。
总之，前夫不给孩子钱却有钱给“小四”用，这一行为可能涉及违法并违反道德规范。您应该根据实际情况采取相应的措施来维护孩子的权益。