结论：是否构成犯罪不能一概而论，需要分情况讨论，主要取决于不给钱这一行为背后的原因、性质以及具体情节等因素。以下为你详细分析：

若对方充值虚拟货币用于赌博的行为本身违法，且你以此为由拒不给钱

1. 法律背景：在我国，赌博是违法犯罪行为。虚拟货币不具有与法定货币等同的法律地位，以虚拟货币进行赌博，同样违反了相关法律法规关于禁止赌博的规定。如果对方充值虚拟货币赌博，其充值行为以及后续的赌博行为均不受法律保护。
2. 法律建议：在这种情况下，你拒不给钱一般不构成犯罪。因为对方的行为本身违法，其基于违法行为所产生的“权益”不受法律保护。不过，从道德层面来讲，如果双方事先有关于充值的约定（尽管约定内容可能因赌博违法而无效），你直接拒不给钱可能会引发一些纠纷，建议你可以通过合理的方式，如向对方说明其行为违法，告知其不应通过这种方式获取利益等，来处理此事。
3. 可能法律后果：通常不会面临刑事处罚，但如果对方采取一些不正当手段，如威胁、骚扰等向你索要钱财，你可能需要采取法律手段维护自身权益，比如报警处理。

若你以非法占有为目的，通过欺骗等手段让对方充值虚拟货币赌博，然后不给钱

1. 法律背景：如果你主观上具有非法占有对方财物的目的，通过虚构事实、隐瞒真相等欺骗手段，使对方基于错误认识而充值虚拟货币用于赌博，之后你拒不返还钱财，这种行为可能涉嫌诈骗罪。诈骗罪是指以非法占有为目的，用虚构事实或者隐瞒真相的方法，骗取数额较大的公私财物的行为。虽然对方充值用于赌博的行为违法，但这并不影响你诈骗行为的定性。
2. 法律建议：一旦出现这种情况，你应立即停止这种违法行为。如果已经实施了相关行为，建议尽快主动向对方说明情况，返还钱财，争取对方的谅解，以避免受到更严厉的法律制裁。同时，要认识到赌博以及以欺骗手段获取他人财物都是严重违反法律和道德的行为，以后要遵守法律法规，远离违法犯罪活动。
3. 可能法律后果：根据《中华人民共和国刑法》第二百六十六条规定，诈骗公私财物，数额较大的，处三年以下有期徒刑、拘役或者管制，并处或者单处罚金；数额巨大或者有其他严重情节的，处三年以上十年以下有期徒刑，并处罚金；数额特别巨大或者有其他特别严重情节的，处十年以上有期徒刑或者无期徒刑，并处罚金或者没收财产。具体量刑会根据诈骗数额、犯罪情节等因素综合确定。

若双方存在经济纠纷，对方充值虚拟货币赌博，你因纠纷拒不给钱

1. 法律背景：如果双方存在合法的经济纠纷，比如存在买卖合同、借贷关系等，对方却将资金用于充值虚拟货币赌博，而你因为对方未履行相关经济义务（如未还款、未交付货物等）而拒不给钱。这种情况下，你的拒不给钱行为本身一般不直接构成犯罪，但需要依据具体的经济纠纷情况来判断。
2. 法律建议：对于经济纠纷，应当通过合法的途径来解决，如协商、调解、仲裁或者诉讼等。你可以收集相关证据，证明对方存在违约等行为，然后通过上述合法方式来维护自己的权益，而不是简单地拒不给钱。同时，对于对方充值虚拟货币赌博的行为，你也可以向相关部门进行举报。
3. 可能法律后果：如果通过合法途径解决经济纠纷，一般不会面临刑事处罚。但如果你在处理纠纷过程中采取了过激或者违法的手段，如非法拘禁、故意伤害对方等，则可能会构成其他犯罪，需要承担相应的刑事责任。

如果你还有其他关于刑事案件（金融诈骗辩护）或者经济纠纷方面的问题，都可以直接向我咨询。