关于您提出的“婚外情有小孩，被男方要去小孩，要告男人会坐牢吗”的问题，我可以从法律的角度为您详细解答。

首先，单纯因婚外情并生育子女的行为，并不构成刑事犯罪，因此男方通常不会因此坐牢。婚外情主要属于道德范畴的问题，而非刑事法律所规范的对象。但是，如果男方的行为涉及到了重婚罪，即他在有配偶的情况下又与他人结婚，或者明知他人有配偶而与之结婚，那么他就需要承担刑事责任，可能会被判处二年以下有期徒刑或拘役。

其次，关于婚外情所生子女的抚养问题，男方是有责任支付抚养费的。《民法典》明确规定，非婚生子女享有与婚生子女同等的权利，任何组织或者个人不得加以危害和歧视。不直接抚养非婚生子女的生父或者生母，应当负担未成年子女或者不能独立生活的成年子女的抚养费。抚养费的数额等可以由双方协商确定，协商不成的，可以向法院提起诉讼，由法院根据子女的实际需要、父母的负担能力和当地的实际生活水平等因素来确定。

最后，关于您提到的“被男方要去小孩”的情况，如果涉及到子女的抚养权争议，您可以通过法律途径来解决。在处理这类问题时，法院会综合考虑子女的年龄、性别、健康状况、父母的抚养能力、抚养条件以及子女的意愿等因素，来判决子女的抚养权归属。

综上所述，单纯因婚外情并生育子女的行为并不会导致男方坐牢，但男方需要承担支付抚养费的责任。如果涉及到子女的抚养权争议，建议您通过法律途径来解决。如果您有任何进一步的法律问题或需要更详细的法律建议，请随时向我咨询。