非法行医一般不会不谈话直接下罚款通知书，但特定紧急或证据确凿情况下可能直接处罚。具体分析如下：

1. 一般程序要求
   根据《行政处罚法》及《卫生行政处罚程序》，卫生行政部门对非法行医的查处通常需遵循“立案→调查取证→审查→告知→听取陈述申辩→作出处罚决定”的流程。其中，告知当事人违法事实、处罚依据及权利（如陈述、申辩权）是法定程序，直接跳过谈话环节可能构成程序违法，导致处罚决定被撤销。

2. 例外情形

   • 紧急情况：若非法行医行为已严重危及公众健康（如使用假药、器械导致多人伤亡），卫生部门可能依据《行政处罚法》第54条“先行登记保存证据”或《突发公共卫生事件应急条例》采取紧急措施，在后续程序中补全告知手续，但实践中仍会尽快与当事人沟通。
     
   • 证据确凿且当事人拒不配合：若当事人逃避调查、拒不露面，且现有证据（如现场查获的医疗设备、患者证言、转账记录等）已形成完整证据链，行政机关可能依据《行政处罚法》第41条“电子送达”或公告送达方式完成告知，但“不谈话”仅指未当面沟通，仍需通过其他方式保障当事人知情权。

3. 当事人权利保障
   即使行政机关认为需快速处罚，当事人仍享有：

   • 申请听证权：对较大数额罚款（如个人5000元以上、单位3万元以上）可要求听证；
     
   • 复议或诉讼权：若认为处罚违法，可在60日内申请行政复议或6个月内提起行政诉讼，法院将审查程序合法性。

建议：若您或他人遭遇此类情况，可要求行政机关出示处罚依据及程序证明，如未依法告知或听取申辩，可通过法律途径维权。如有具体案件细节，欢迎进一步向我咨询。