城管对临街单位建筑外立面和围墙破损影响市容市貌进行处罚，主要依据以下法律法规：
《城市市容和环境卫生管理条例》
这是城管部门处罚此类行为的核心法律依据。根据该条例：
- 第十一条：明确规定“一切单位和个人都应当保持建筑物的整洁、美观”，临街建筑的外立面、围墙等设施需符合城市容貌标准，不得存在破损、污损、剥落等影响市容的情形。
- 第三十四条：赋予城管部门对违反市容管理行为的处罚权，包括责令限期改正、警告、罚款等措施。若单位未及时修复破损设施，城管可依据此条进行处罚。
地方性法规或政府规章
各地可能根据实际情况制定更具体的规定，例如：
- 《XX市市容环境卫生管理条例》（以用户所在城市为准）：通常会对建筑外立面、围墙的维护标准、处罚细则等作出细化规定。例如，明确破损面积达到一定比例或存在安全隐患时，城管可直接处罚。
- 《XX市城市管理相对集中行政处罚权实施办法》：部分城市将市容管理处罚权集中由城管行使，并明确处罚程序和标准。
《行政处罚法》作为程序依据
城管在处罚时需遵循法定程序，包括：
- 立案调查：发现破损后，城管需调查取证（如拍照、测量破损面积）。
- 告知权利：处罚前需告知当事人违法事实、处罚依据及陈述申辩权。
- 作出处罚决定：根据情节轻重，可处警告、罚款（通常为数百至数千元，具体看地方规定），逾期不整改的，可强制执行或申请法院强制执行。
实务建议：
若单位收到处罚通知，可重点核查：
- 城管是否依法履行了调查、告知等程序；
- 处罚依据的地方性法规是否明确破损标准及处罚幅度；
- 是否存在免责情形（如因不可抗力导致破损，且已及时报备）。
如有争议，可依法申请行政复议或提起行政诉讼。具体问题可直接向我咨询，我会结合您所在城市的法规进一步分析。