不遵守禁止离港的处罚需根据具体情形和法律适用来确定，一般可能面临行政处罚或刑事处罚。以下分情况详细说明：

1. 行政处罚层面
   若禁止离港是行政机关（如海事部门、公安机关）依法作出的行政命令（例如船舶存在安全隐患、涉及行政调查等情形），违反者可能面临《治安管理处罚法》或相关行业法规的处罚。

   • 处罚类型：警告、罚款、拘留等。例如，根据《治安管理处罚法》第五十条，拒不执行人民政府在紧急状态情况下依法发布的决定、命令的，可处警告或二百元以下罚款；情节严重的，处五日以上十日以下拘留，可以并处五百元以下罚款。
     
   • 适用情形：需以行政机关的合法命令为前提，且行为人主观上明知命令存在仍故意违反。

2. 刑事处罚层面
   若禁止离港涉及司法程序（如法院作出的财产保全、刑事强制措施等），违反者可能构成《刑法》中的相关犯罪。

   • 典型罪名：
     
     • 妨害公务罪（《刑法》第二百七十七条）：以暴力、威胁方法阻碍国家机关工作人员依法执行职务的，处三年以下有期徒刑、拘役、管制或罚金。若通过隐匿、转移财产等方式逃避禁止离港的司法执行，可能被认定为“阻碍执行职务”。
       
     • 非法处置查封、扣押、冻结的财产罪（《刑法》第三百一十四条）：隐藏、转移、变卖、故意毁损已被司法机关查封、扣押、冻结的财产，情节严重的，处三年以下有期徒刑、拘役或罚金。
       
   • 适用情形：需以司法机关的合法裁定为前提，且行为达到“情节严重”标准（如多次违反、造成重大损失等）。

3. 特殊领域补充

   • 海事领域：若禁止离港针对船舶（如因欠薪、污染等），违反者可能面临海事行政处罚（如扣留船舶、罚款），同时需承担民事赔偿责任。
     
   • 出入境管理：若禁止离港涉及限制出境（如因未履行生效判决），违反者可能被强制遣返，并面临罚款或拘留。

建议：若您或他人面临禁止离港的命令，务必先核实命令的合法性及发布主体，再通过合法途径申请复议或申诉，避免因擅自离港承担更严重的法律后果。如有具体案件细节，可进一步向我咨询，我会结合证据和法律条款为您分析。