临时工一般不可以担任行政处罚听证记录员，具体分析如下：

1. 法律身份与职责要求
   根据《行政处罚法》及相关规定，听证记录员需由行政机关指定非本案调查人员担任，且应具备正式公职身份。临时工（非在编人员）因未通过法定程序取得行政执法资格，通常不具备独立履行听证记录职责的合法性。其身份性质决定了其难以被认定为符合法律要求的“行政机关工作人员”。

2. 程序公正性要求
   听证程序的核心是保障当事人陈述、申辩权，记录员需客观、中立记录全过程。若由临时工担任，可能因身份独立性存疑（如与调查人员存在事实上的隶属关系）或专业能力不足（如法律知识、记录规范掌握不充分），影响听证程序的公正性，进而构成程序违法。

3. 例外情形与风险规避
   极少数情况下，若临时工通过行政机关委托（需明确授权范围、期限并备案）或辅助性工作参与（如仅操作录音设备，不涉及实质记录），可能被允许参与听证流程。但此类情形需严格符合《行政程序法》中关于“辅助人员”的界定，且不得独立行使记录、审核等核心职权。实践中，行政机关为规避风险，通常不会安排临时工担任记录员。

建议：若您作为当事人发现听证记录员为临时工，可当场提出异议，要求更换具备合法身份的人员；若已产生不利后果，可在行政复议或诉讼中以“程序违法”为由主张撤销处罚决定。如有具体案件细节需进一步分析，可直接向我咨询。