未按照交警示意靠边停车，确实可能会面临罚款，但具体是否处罚及处罚方式需分情况讨论：

1. 正常执法情形：若交警在执行公务时，明确示意您靠边停车（例如通过手势、喊话、警灯示意等方式），而您未服从指挥继续行驶，此行为已构成“不按照交通警察指挥通行”。根据《道路交通安全法》第三十八条和第九十条，交警可对您处以20元以上200元以下罚款，并可能扣3分（具体扣分以地方规定为准）。

2. 特殊情形下的豁免：若您未停车是因为存在紧急避险情况（如车上有人突发疾病需立即送医、前方发生重大事故需绕行等），且事后能提供相关证明（如医院诊断记录、事故现场照片等），可向交警部门说明情况，申请免于处罚。但需注意，紧急避险的认定需严格符合法律条件，不能随意主张。

3. 程序合法性要求：交警在执法时需穿着制服、出示证件，并使用规范手势或设备示意停车。若交警未履行上述程序（如未穿制服、未出示证件等），您有权拒绝停车并要求其规范执法。但此情形不意味着您可以直接驶离，建议先减速观察，确认对方身份后再做决定，避免因误判导致更严重后果。

建议：若您已因未停车被处罚，可先核对处罚决定书上的违法事实、法律依据是否准确。若对处罚有异议，可在收到决定书后60日内申请行政复议，或6个月内提起行政诉讼。如有具体案件细节需要分析，可直接向我咨询。