该男人的行为可能构成犯法，具体可能涉及侵犯人身权利、财产权利等多个方面。针对你的描述，我们可以从以下几个方面进行分析：

一. 关于打骂行为

1. 可能构成家庭暴力：如果该男人与你存在共同生活关系，如夫妻、恋人等，并且他对你实施打骂，这可能构成家庭暴力。根据《反家庭暴力法》的相关规定，家庭暴力是违法行为，受害者有权寻求法律帮助。

2. 可能构成故意伤害罪：如果打骂行为导致你受伤，且伤势达到轻伤或更重，那么该男人的行为可能构成故意伤害罪。根据《刑法》第二百三十四条，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制。

二. 关于拿走你衣服的行为

1. 可能构成侵犯财产权：该男人未经你同意，擅自拿走你的衣服，这侵犯了你的财产权利。虽然衣服的价值可能不大，但这一行为本身仍然是不合法的。

2. 可能构成抢劫或抢夺：如果他在拿走衣服的同时，还对你使用了暴力或威胁，那么这一行为可能构成抢劫或抢夺。根据《刑法》的相关规定，抢劫和抢夺都是犯罪行为，需要承担刑事责任。

三. 关于“不给钱就打骂我”的威胁行为

1. 可能构成敲诈勒索：如果该男人以打骂为威胁，要求你给付钱财，那么这一行为可能构成敲诈勒索。根据《刑法》第二百七十四条，敲诈勒索公私财物，数额较大的，处三年以下有期徒刑、拘役或者管制，并处或者单处罚金。

综上所述，该男人的行为可能涉及多个违法行为，包括家庭暴力、故意伤害罪、侵犯财产权、抢劫或抢夺以及敲诈勒索等。我建议你立即报警，并向警方详细陈述他的行为，以便警方能够依法进行调查和处理。同时，你也可以寻求法律援助，以维护自己的合法权益。如有进一步需要，您可以继续咨询我。