结论：已婚男人转账给你，你一直退还但对方一直转，这一行为本身并不直接构成违法，但可能涉及道德和家庭关系层面的问题。若转账资金属于夫妻共同财产，且未经配偶同意，可能引发法律纠纷，特别是如果配偶主张返还。
分析说明：
转账行为的法律性质：
- 转账行为本身是一种民事法律行为，如果转账是出于自愿且没有违反法律法规的强制性规定，那么这一行为在法律上是有效的。
- 然而，如果转账的资金属于已婚男人的夫妻共同财产，且未经其配偶的同意，那么这一行为可能侵犯了配偶的财产权益。
夫妻共同财产的处理：
- 根据《中华人民共和国民法典》的相关规定，夫妻在婚姻关系存续期间所得的财产，归夫妻共同所有，双方有平等的处理权。
- 如果已婚男人未经配偶同意，擅自将夫妻共同财产转账给你，配偶有权要求返还这部分财产，因为这侵犯了她的财产权益。
你的退还行为：
- 你一直退还转账，表明你并不愿意接受这笔财产，这一行为在道德上是值得肯定的。
- 从法律角度来看，你的退还行为也避免了可能因接受不当得利而引发的法律纠纷。
可能的法律后果：
- 如果已婚男人的配偶发现转账行为并主张返还，而你无法证明已经退还或转账并非出于不当得利，那么你可能需要承担返还财产的法律责任。
- 此外，如果已婚男人的转账行为被认定为对婚姻关系的破坏（如构成婚外情等），还可能引发其他法律纠纷，如离婚时的财产分割、损害赔偿等。
特别提醒：
- 在处理此类情况时，建议保持谨慎和理智，避免卷入不必要的法律纠纷。
- 如果已婚男人持续转账且你无法退还，或者其配偶已经发现并主张权利，建议及时寻求法律帮助，以维护自己的合法权益。
后续行动建议：
- 如果已婚男人继续转账，你可以明确告知他你不愿意接受这笔财产，并要求他停止转账行为。
- 如果情况复杂或涉及较大金额，建议咨询专业律师（即我本人，张俊华律师，专注于遗产继承、离婚财产纠纷领域），以获取更具体的法律建议和帮助。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。