针对您提出的问题，即如果小孩判给自己，但男方被撤销了监护权，现在想要将孩子接回身边是否需要向法院起诉，以下是我的详细解答：
首先，我们需要明确的是，在监护权已经明确归属一方的情况下，另一方若未经允许擅自将孩子带走，是构成对监护权归属方权利的侵害的。这一点在多个相关案例中都有明确的体现，如指导性案例228号张某诉李某、刘某监护权纠纷案，以及康保县人民法院审理的刘女士与田先生的监护权纠纷案。
在这些案例中，法院均认为，父母双方对未成年子女享有平等的监护权，这一权利受到法律的保护。当一方擅自抢夺、藏匿未成年子女时，不仅侵害了另一方的监护权，也严重损害了未成年子女的利益。因此，如果男方在监护权被撤销后，未经您允许擅自将孩子带走，您完全有权向法院提起诉讼，要求男方将孩子送回，并由您继续行使监护权。
接下来，我们分析一下诉讼的具体流程和可能的结果：
提起诉讼：您需要准备相关的证据材料，如法院之前的判决文书、男方擅自带走孩子的证据（如视频、照片、证人证言等），以及您作为监护人能够为孩子提供更好生活和教育环境的证明等。然后，向有管辖权的法院提起诉讼，要求法院判决男方将孩子送回，并确认您的监护权。
法院审理：法院在受理案件后，会依法进行审理。在审理过程中，法院会听取双方的陈述和辩论，审查相关证据，并根据最有利于未成年子女的原则来作出判决。
判决结果：如果法院认定男方的行为确实构成了对您监护权的侵害，且您作为监护人能够为孩子提供更好的生活和教育环境，那么法院很可能会判决男方将孩子送回，并确认您的监护权。同时，法院也可能会根据具体情况，判决男方享有一定的探望权，以确保孩子能够得到父母的共同关爱。
最后，我想强调的是，在处理此类纠纷时，我们应始终将孩子的利益放在首位。无论最终判决结果如何，我们都应尽力为孩子创造一个稳定、和谐、有爱的成长环境。如果可能的话，我也建议您与男方进行积极的沟通和协商，尝试通过和平的方式解决纠纷，以减少对孩子的伤害。
希望以上解答能够对您有所帮助。如果您还有其他问题或需要进一步的法律帮助，请随时告诉我。