公司不能仅以迟到次数为由随便开除员工。以下从不同角度为你详细分析：

法律角度

根据《中华人民共和国劳动合同法》的相关规定，用人单位解除劳动合同必须符合法定情形。一般来说，用人单位以员工严重违反规章制度为由解除劳动合同，需要满足以下条件：

1. 规章制度合法有效：公司的规章制度必须经过民主程序制定，即应当经职工代表大会或者全体职工讨论，提出方案和意见，与工会或者职工代表平等协商确定。并且，规章制度需要向员工公示或者告知，确保员工知晓。如果公司的规章制度没有经过这些程序，或者没有告知员工，那么以此为依据开除员工可能被认定为违法解除。
2. 迟到行为达到严重程度：即使公司的规章制度中规定了迟到可以解除劳动合同，也需要明确迟到的次数、频率等达到何种程度才构成“严重违反规章制度”。例如，有的公司规定一个月内迟到超过5次，或者一年内累计迟到超过20次等，才属于严重违反规章制度。如果公司没有明确规定，或者规定的标准不合理，仅仅以几次迟到就开除员工，可能缺乏法律依据。

实际案例角度

在实际的劳动仲裁和司法实践中，有很多类似的案例。比如，有的公司仅仅因为员工一个月内迟到了3次，就以严重违反规章制度为由开除了员工。员工申请劳动仲裁后，仲裁机构认为公司的规章制度中没有明确规定迟到几次属于严重违反规章制度，且该员工的迟到行为并未给公司造成重大损失，因此认定公司属于违法解除劳动合同，需要向员工支付赔偿金。

给公司的建议

如果公司确实因为员工的迟到问题想要解除劳动合同，应当：

1. 完善规章制度：明确规定迟到的次数、频率等达到何种程度构成严重违反规章制度，以及相应的处罚措施。并且，要确保规章制度经过民主程序制定，并向员工公示或告知。
2. 收集证据：在解除劳动合同前，要收集员工迟到的相关证据，如考勤记录、监控视频等，以证明员工的迟到行为确实存在。
3. 通知工会：如果公司设立了工会，在解除劳动合同前应当将理由通知工会。工会认为公司违反法律、法规和有关合同，要求重新研究处理时，公司应当研究工会的意见，并将处理结果书面通知工会。

给员工的建议

如果公司以迟到次数为由开除了你，你认为公司的行为违法，可以：

1. 与公司协商：尝试与公司进行沟通，说明公司的解除行为可能违法，争取协商解决，如要求公司继续履行劳动合同或者支付赔偿金。
2. 申请劳动仲裁：如果协商不成，可以向当地的劳动仲裁机构申请劳动仲裁，要求公司支付违法解除劳动合同的赔偿金。赔偿金的计算标准为：按照劳动者在本单位工作的年限，每满一年支付两个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付一个月工资的经济补偿。

如果你还有其他关于劳动工伤方面的问题，可以直接向我咨询。