行政行为被确认无效后，行政机关需承担多方面的责任。具体来说：

1. 自始无效与当事人不受拘束：

   • 无效的行政行为自始不发生法律效力，当事人不受该行为拘束，不履行该行为确定的任何义务，且对此种不履行不承担法律责任。

2. 恢复原状与赔偿损失：

   • 行政机关因该无效行为取得的一切利益均应返还相对人，并赔偿给相对人带来的相应损失。这包括直接损失，并在某些情况下涉及部分间接损失。

3. 纠正违法并采取补救措施：

   • 行政机关有义务立即停止实施违法的行政行为，并依据相关规定采取相应的补救措施，如撤销、变更或重新作出具体行政行为等，以纠正违法行为带来的后果。

4. 对相关责任人员的处理：

   • 行政机关内部应对导致行政行为违法的直接负责的主管人员和其他直接责任人员进行严肃处理，包括给予行政处分，如警告、记过、记大过、降级、撤职、开除等。对于情节严重构成犯罪的，还应依法追究刑事责任。

5. 恢复名誉、消除影响：

   • 如果违法行政行为给当事人的名誉权、荣誉权等造成损害，行政机关应当在侵权行为影响的范围内，以适当方式为受害人消除影响、恢复名誉、赔礼道歉。

6. 接受监督与问责：

   • 行政机关的违法行政行为被确认后，还需接受权力机关、上级行政机关等的监督检查，并按照要求作出整改。同时，行政机关应主动接受社会舆论的监督和公众的问责。

综上所述，行政行为被确认无效后，行政机关需承担纠正违法、赔偿损失、处理责任人员、恢复名誉以及接受监督与问责等多方面的责任。这些责任的承担不仅有助于维护公民的合法权益，也促进了法治政府的建设和行政机关公信力的提升。如果您有具体的行政纠纷问题，可以直接向我咨询，我会为您提供更详细的法律分析和建议。