针对违建施工中工人不停工的情况，核心结论是：您作为建设方或相关责任方，应立即采取合法措施制止违建行为，包括但不限于现场劝阻、向行政主管部门举报、通过法律途径申请强制措施等，以避免因违建行为承担法律责任。以下从不同角度展开说明：
现场劝阻与沟通
首先，您可尝试与工人或施工负责人直接沟通，明确告知其施工行为涉嫌违法（如未取得建设工程规划许可证、施工许可证等），并要求立即停工。若工人因雇佣关系或利益驱动拒绝停工，您需进一步采取其他措施。
法律依据：根据《城乡规划法》第六十四条，未取得建设工程规划许可证或未按照规划许可建设的，属违法行为，行政主管部门可责令停止建设、限期改正或拆除。
向行政主管部门举报
若现场劝阻无效，您应立即向当地城乡规划部门、城市管理综合执法部门或住房和城乡建设部门举报违建行为。行政机关有权依法查封施工现场、责令停工，并对违建方处以罚款、强制拆除等处罚。
操作建议：举报时需提供违建地址、施工照片、视频等证据，并明确要求行政机关出具书面处理结果。若行政机关未及时履职，您可依法申请行政复议或提起行政诉讼。
通过法律途径申请强制措施
若违建行为已对您造成实际损害（如占用您的土地、影响采光通风等），您可向法院提起相邻权纠纷或侵权责任纠纷诉讼，并申请“行为保全”或“先予执行”，要求法院裁定违建方立即停止施工。
法律依据：根据《民事诉讼法》第一百零三条，法院可根据当事人申请，裁定对方停止侵害、排除妨碍等行为。
注意自身法律风险
若您是违建的建设方或出资方，需警惕因违建行为被行政处罚（如罚款、没收违法所得）或承担民事赔偿责任（如对第三方造成损害）。若工人因施工受伤，您还可能因未提供安全施工条件而承担工伤赔偿责任。
风险提示：违建行为不仅可能被强制拆除，还可能影响您的信用记录，甚至涉及刑事责任（如构成“非法占用农用地罪”等）。
总结建议：违建施工问题需从行政、民事、刑事多角度综合处理，建议您优先通过行政举报快速制止违建行为，同时咨询专业律师评估法律风险，必要时通过诉讼维护权益。如有进一步问题，可直接向我提问。