结论：男女双方没结婚有小孩，一方不想继续共同生活并将孩子“送回去”，这一行为本身通常不会直接导致坐牢，但具体是否构成犯罪以及是否会受到刑事处罚，需根据“送回去”的具体方式、是否尽到抚养义务以及是否造成严重后果等因素综合判断。
详细分析：
非犯罪情形：
- 如果双方能够就孩子的抚养问题达成协议，比如一方愿意承担抚养责任，另一方则通过支付抚养费等方式履行抚养义务，那么将孩子交给愿意抚养的一方，并不构成犯罪。
- 如果“送回去”是指将孩子交给其直系亲属（如祖父母、外祖父母）抚养，且这些亲属愿意并有能力抚养，同时这一行为也符合孩子的最佳利益，那么通常也不会构成犯罪。但需要注意的是，这种情况下，父母仍然负有抚养义务，不能完全免除责任。
可能构成犯罪的情形：
- 遗弃罪：如果一方将孩子遗弃在无人照料的地方，或者虽然将孩子交给他人但未尽到必要的抚养义务（如不支付抚养费、不关心孩子的生活状况等），且情节恶劣的，可能构成遗弃罪。根据《中华人民共和国刑法》的相关规定，遗弃罪是指对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的行为。犯遗弃罪的，处五年以下有期徒刑、拘役或者管制。
- 虐待罪或故意伤害罪：如果在“送回去”的过程中，一方对孩子实施了虐待或故意伤害的行为，且情节严重，那么可能构成虐待罪或故意伤害罪。这些罪名的成立和刑罚的轻重将取决于具体的伤害程度和情节恶劣程度。
法律建议：
- 协商解决：如果双方无法就孩子的抚养问题达成一致，建议首先通过协商的方式解决。可以寻求亲友、社区或相关机构的帮助，共同商讨一个对孩子最有利的抚养方案。
- 法律途径：如果协商无果，可以考虑通过法律途径解决。可以向法院提起诉讼，请求法院判决孩子的抚养权归属以及抚养费的支付等问题。法院将根据孩子的最佳利益原则进行判决。
- 履行抚养义务：无论最终判决结果如何，作为父母都有义务履行对孩子的抚养责任。这包括提供必要的生活条件、教育机会以及关爱和陪伴等。
后续行动建议：
- 如果您正面临这样的问题，建议首先保持冷静，不要采取过激或违法的行为。
- 尽快与对方进行沟通，尝试通过协商的方式解决问题。
- 如果协商无果或对方拒绝履行抚养义务，可以考虑寻求法律帮助，通过法律途径维护自己和孩子的合法权益。
如有任何疑问或需要进一步的法律帮助，请随时向我咨询。