在居民区办厂即使没有造成污染，也可能因违反相关规划、环保及行政管理规定而面临处罚，具体处罚措施需根据工厂的违法情形及当地法规综合判断。以下从不同角度详细分析：

1. 违反规划许可的处罚
   居民区通常属于居住用地性质，而工厂建设需符合土地利用总体规划和城乡规划。若工厂未取得《建设工程规划许可证》或《建设用地规划许可证》，擅自改变土地用途（如将居住用地用于工业生产），可能面临以下处罚：

   • 行政处罚：由城乡规划部门责令限期拆除违法建筑，恢复土地原状；逾期不拆除的，可依法强制拆除，并处建设工程造价5%-10%的罚款（《城乡规划法》第六十四条）。
     
   • 特殊情形：若工厂符合规划但未办理手续，可能被责令补办手续并罚款；若不符合规划且无法采取改正措施，则直接面临拆除风险。

2. 违反环保审批的处罚
   即使工厂未实际排放污染物，若未依法办理环境影响评价（环评）手续或未取得排污许可证，仍可能被认定为违法：

   • 环评违法：根据《环境影响评价法》第三十一条，未报批环评文件擅自开工建设的，由生态环境部门责令停止建设，处项目总投资额1%-5%的罚款；对建设单位直接负责的主管人员和其他责任人员，可处5万元以上20万元以下罚款。
     
   • 排污许可违法：若工厂属于需申领排污许可证的行业（如化工、印染等），未取得许可证排放污染物的，即使未实际排放，也可能被责令改正或限制生产、停产整治，并处20万元以上100万元以下罚款（《排污许可管理条例》第三十三条）。

3. 违反工商登记的处罚
   工厂需在工商部门登记注册并明确经营范围。若在居民区擅自设立工厂且未办理营业执照，或超出经营范围从事工业生产，可能面临：

   • 无照经营处罚：由市场监管部门责令停止经营活动，没收违法所得；对个体工商户处5000元以下罚款，对企业处1万元以上10万元以下罚款（《无证无照经营查处办法》第十三条）。
     
   • 住所登记违法：若工厂登记地址与实际经营地址不符，可能被责令限期办理变更登记；逾期不办的，处1万元以上10万元以下罚款（《公司登记管理条例》第六十八条）。

4. 其他潜在处罚

   • 消防安全违法：若工厂未通过消防验收或存在安全隐患，可能被消防部门责令停产停业并罚款（《消防法》第六十条）。
     
   • 安全生产违法：若工厂涉及危险化学品等高风险行业，未取得安全生产许可证的，可能被应急管理部门责令停止生产，没收违法所得，并处10万元以上50万元以下罚款（《安全生产许可证条例》第十九条）。

建议行动：
若您或他人面临此类问题，建议立即：

1. 核查工厂的规划许可、环评手续、排污许可及工商登记等合法性文件；
   
2. 咨询当地城乡规划、生态环境、市场监管等部门，明确具体违法情形及整改要求；
   
3. 根据部门要求限期整改（如补办手续、搬迁或拆除），避免处罚升级。
   

如有进一步疑问，可直接向我咨询具体法律问题。