结论前置：公司是否因您拒绝卸货而有权辞退您，需视具体情况而定，主要取决于您的劳动合同或公司规章制度中是否明确规定了司机需承担卸货职责，以及公司辞退您的理由是否合法合理。
一、劳动合同或公司规章制度中的约定
若劳动合同或公司规章制度中明确规定了司机需承担卸货职责：
- 在这种情况下，您作为司机，除了驾驶车辆外，还负有按照公司要求完成卸货的义务。如果您拒绝履行这一义务，公司可能会认为您违反了劳动合同或公司规章制度，从而有权依据相关规定对您进行辞退。但即便如此，公司辞退您也需遵循法定程序，如提前通知、支付经济补偿等（若符合法定辞退情形且无需支付经济补偿的除外）。
若劳动合同或公司规章制度中未明确规定司机需承担卸货职责：
- 在这种情况下，您作为司机的主要职责是驾驶车辆，而非卸货。公司要求您卸货可能超出了您的职责范围。如果您拒绝卸货，公司不能仅凭此理由就辞退您。因为公司辞退员工需有合法合理的理由，且需符合法定程序。
二、公司辞退您的理由是否合法合理
合法理由：
- 公司辞退您需有合法依据，如您严重违反公司规章制度、严重失职给公司造成重大损害、被依法追究刑事责任等。如果公司仅因您拒绝卸货就辞退您，且该行为未构成严重违反公司规章制度或给公司造成重大损害，那么公司的辞退行为可能不合法。
合理程序：
- 即使公司有合法理由辞退您，也需遵循合理程序，如提前通知您、听取您的陈述和申辩、支付经济补偿（若符合法定情形）等。如果公司未遵循这些程序，其辞退行为也可能被视为违法。
三、建议与行动
查看劳动合同和公司规章制度：
- 首先，您应仔细查看自己的劳动合同和公司规章制度，了解其中是否明确规定了司机需承担卸货职责以及公司辞退员工的条件和程序。
与公司沟通协商：
- 如果您认为公司要求您卸货超出了您的职责范围或公司辞退您的理由不合法不合理，您可以与公司进行沟通协商，表达您的观点和诉求。
寻求法律援助：
- 如果沟通协商无果，您可以考虑寻求法律援助或咨询专业律师（即向我咨询），了解您的权益和可能的法律途径。在必要时，您可以向劳动仲裁机构申请劳动仲裁或向人民法院提起诉讼来维护自己的合法权益。
总之，公司是否因您拒绝卸货而有权辞退您需视具体情况而定。如果您对此有疑问或需要进一步的法律帮助，请随时向我咨询。