玩忽职守的行政行为，在符合法定条件的情况下，是应当被撤销的。以下从多个角度为你详细分析：

法律依据与撤销条件

根据《中华人民共和国行政诉讼法》的相关规定，行政行为有下列情形之一的，人民法院判决撤销或者部分撤销，并可以判决被告重新作出行政行为：

1. 主要证据不足：如果行政行为缺乏足够的证据支持，无法证明其合法性和合理性，那么该行为就可能被视为玩忽职守，从而被撤销。
2. 适用法律、法规错误：行政机关在作出行政行为时，必须正确适用相关的法律、法规。如果适用错误，导致行政行为违法或不当，那么该行为也可能被撤销。
3. 违反法定程序：行政机关在作出行政行为时，必须遵循法定的程序。如果违反程序，如未听取当事人意见、未进行必要的调查等，那么该行为同样可能被视为玩忽职守，从而被撤销。
4. 超越职权或滥用职权：行政机关必须在其法定职权范围内行使权力。如果超越职权或滥用职权，作出违法或不当的行政行为，那么该行为也将面临被撤销的风险。
5. 明显不当：即使行政行为在证据、法律适用和程序上都没有问题，但如果其结果明显不当，如处罚过重或过轻等，也可能被视为玩忽职守，从而被撤销或变更。

撤销的后果与影响

1. 对行政机关的影响：行政行为被撤销后，行政机关需要重新作出行政行为，这可能会耗费更多的时间和资源。同时，撤销决定也可能对行政机关的声誉和公信力造成负面影响。
2. 对当事人的影响：对于当事人来说，行政行为的撤销可能意味着其权益得到了保护。例如，如果行政处罚被撤销，那么当事人就不再需要承担相应的处罚责任。然而，如果撤销决定导致当事人需要重新面对行政程序，那么这也可能会给当事人带来一定的不便和负担。

实际操作中的考量

1. 证据收集与审查：在判断行政行为是否玩忽职守时，证据的收集和审查至关重要。行政机关和法院需要仔细审查行政行为的证据是否充分、合法，以及是否能够支持行政行为的合法性和合理性。
2. 法律适用与解释：法律适用和解释也是判断行政行为是否玩忽职守的关键环节。行政机关和法院需要正确理解和适用相关的法律、法规，确保行政行为的合法性和正当性。
3. 程序公正与透明：程序公正和透明是保障行政行为合法性和正当性的重要原则。行政机关在作出行政行为时，必须遵循法定的程序，确保当事人的合法权益得到充分保障。

建议与提醒

1. 对于行政机关：建议行政机关在作出行政行为时，务必严格遵守法律、法规和程序要求，确保行政行为的合法性和正当性。同时，加强内部监督和审查机制，及时发现和纠正玩忽职守的行为。
2. 对于当事人：如果你认为行政机关的行政行为存在玩忽职守的情况，你可以依法向人民法院提起行政诉讼，要求撤销该行政行为。在提起诉讼前，建议你收集充分的证据来支持你的主张。

如果你在行政纠纷方面有任何疑问或需要进一步的法律帮助，请随时向我咨询。