结论：公司是否有权因员工下班期间在外面偷了一杯奶茶而辞退，需根据具体情况判断，若该行为构成严重违反公司规章制度或社会公序良俗，且公司规章制度中有明确规定，则公司有权辞退；若不构成，则公司无权仅因此辞退。以下从不同角度详细分析：
一、从公司规章制度角度分析
规章制度内容：
- 公司规章制度是公司内部管理的重要依据，其中可能包含对员工行为的规范要求。若公司规章制度中明确规定，员工有盗窃等违法行为，无论是否在工作时间内、是否与公司业务相关，均视为严重违反公司规章制度，公司有权解除劳动合同。
规章制度制定程序：
- 根据《劳动合同法》第四条，用人单位在制定、修改或者决定有关劳动报酬、工作时间、休息休假、劳动安全卫生、保险福利、职工培训、劳动纪律以及劳动定额管理等直接涉及劳动者切身利益的规章制度或者重大事项时，应当经职工代表大会或者全体职工讨论，提出方案和意见，与工会或者职工代表平等协商确定。
- 若公司规章制度未经上述程序制定或修改，可能被认定为无效，公司不能仅依据无效的规章制度辞退员工。
规章制度告知义务：
- 公司还需将规章制度告知员工，确保员工知晓并理解。若公司未履行告知义务，员工可能主张不知情，从而对公司依据规章制度辞退的行为提出异议。
二、从员工行为性质角度分析
盗窃行为性质：
- 盗窃行为属于违法行为，无论金额大小，均违反了社会公序良俗和法律法规。若员工下班期间在外面偷了一杯奶茶，该行为虽金额较小，但性质恶劣，可能对公司形象造成负面影响。
行为与公司业务关联性：
- 若员工盗窃行为与公司业务无关，且发生在非工作时间，公司可能难以直接依据该行为辞退员工。但若该行为被广泛传播，对公司形象造成严重损害，公司可能依据规章制度中的“损害公司形象”等条款辞退员工。
行为严重性判断：
- 公司需判断员工盗窃行为的严重性。若仅为偶尔、轻微的违法行为，且未对公司造成实质性损害，公司可能选择警告、罚款等较轻的处罚措施；若行为严重，如多次盗窃、金额较大或造成恶劣影响，公司则可能选择辞退。
三、从法律后果角度分析
公司辞退合法性：
- 若公司依据有效的规章制度，且员工盗窃行为构成严重违反规章制度或社会公序良俗，公司辞退员工的行为可能被认定为合法，无需支付经济补偿金。
员工维权途径：
- 若员工认为公司辞退行为违法，可向劳动争议仲裁委员会申请仲裁，要求公司支付违法解除劳动合同的赔偿金。仲裁过程中，员工需提供证据证明公司辞退行为违法，如规章制度无效、未履行告知义务、盗窃行为不构成严重违反规章制度等。
四、建议
对公司：
- 建议公司制定完善的规章制度，明确员工行为的规范要求及处罚措施，并确保规章制度经法定程序制定、修改并告知员工。
- 在处理员工违法行为时，公司需谨慎判断行为严重性，确保辞退行为合法合规。
对员工：
- 建议员工遵守法律法规和社会公序良俗，避免违法行为的发生。
- 若面临公司辞退，员工可咨询专业律师，了解自身权益及维权途径。
如有更多疑问或需要进一步的法律帮助，请直接向我咨询。