公司以上班不回复会议纪要为由进行罚款，一般是不合理的，但需分情况讨论：

1. 从劳动合同及公司规章制度的角度
   根据《劳动合同法》及相关劳动法规，公司对员工进行罚款必须有明确的法律依据或劳动合同、公司规章制度的明确约定。若公司规章制度中并未规定“不回复会议纪要属于违纪行为，可处以罚款”，则公司无权以此为由对员工进行罚款。即使规章制度中有相关规定，也需确保该制度已经过民主程序制定（如职工代表大会讨论、与工会或职工代表协商等），并向员工进行了公示或告知，否则该制度对员工不产生约束力。

2. 从罚款合法性的角度
   罚款属于行政处罚的一种，而根据《行政处罚法》的规定，只有行政机关（如政府、税务、工商等部门）才有权对违法行为进行罚款。公司作为用人单位，并非行政机关，无权对员工进行罚款，除非法律特别授权（如《税收征收管理法》中规定的对纳税人的罚款）。因此，公司以“不回复会议纪要”为由对员工进行罚款，缺乏法律依据，属于违法行为。

3. 从劳动纪律管理的角度
   虽然公司无权罚款，但并不意味着员工可以无视公司的劳动纪律。若员工确实存在不回复会议纪要等违反公司规章制度的行为，公司可以依据规章制度采取其他合法的管理措施，如口头警告、书面警告、扣减绩效工资（需在劳动合同或规章制度中明确约定且合理）、解除劳动合同（在符合法定条件时）等。这些措施需符合法律法规的规定，且不得侵犯员工的合法权益。

建议：

• 若公司以此为由对你进行罚款，你可以要求公司出示相关的规章制度依据，并核实该制度是否经过民主程序制定、是否已向你公示或告知。
  
• 若公司无法提供合法依据，你可以拒绝缴纳罚款，并向当地劳动监察部门投诉或申请劳动仲裁，维护自己的合法权益。
  
• 同时，建议你在今后的工作中注意遵守公司的规章制度，及时回复会议纪要等文件，避免不必要的纠纷。