针对小区清洁工扰民的问题，可采取以下措施解决，我将从法律途径和非法律途径两个角度为你详细分析：

一、法律途径

1. 明确扰民行为的法律性质
   根据《中华人民共和国环境噪声污染防治法》第四十六条，使用机械的清洁作业若产生超过国家规定的环境噪声排放标准（如居民区昼间55分贝、夜间45分贝），即构成违法行为。若清洁工在非规定时间（如早6点前或晚10点后）作业，亦违反《环境噪声污染防治法》第六十三条关于“禁止在噪声敏感建筑物集中区域使用高音广播喇叭”的变相规定。

2. 取证与投诉流程

   • 取证：用手机分贝检测APP（如“分贝仪”）记录噪声值，拍摄清洁作业时间、工具（如高压水枪、扫地机）的视频证据，保留3名以上邻居的书面证言。
     
   • 投诉：向当地生态环境局提交《噪声污染投诉书》，附证据材料，要求依据《环境噪声污染防治法》第六十一条责令改正并处罚款；若涉及物业雇佣的清洁工，可同步向房管部门投诉物业管理失职。

3. 诉讼路径
   若噪声导致健康损害（如听力下降、失眠），可依据《民法典》第一千一百六十五条提起侵权诉讼，主张医疗费、精神损害赔偿等。需提供医院诊断证明、噪声监测报告等证据。

二、非法律途径

1. 与物业协商
   要求物业调整清洁时间（如避开早晚休息时段）、更换低噪声设备（如静音扫地机），或划定远离住宅的清洁区域。可引用《物业管理条例》第三十五条，强调物业有义务制止违规行为并采取合理措施。

2. 业主委员会介入
   通过业委会召开业主大会，制定《小区环境管理规约》，明确清洁作业的噪声限制、时间范围等，并约定违约处罚条款（如从物业费中扣除违约金）。

3. 第三方调解
   联系街道办的人民调解委员会或社区工作站，组织物业、清洁工、业主代表三方调解，达成书面整改协议并监督执行。

行动建议：优先通过物业协商或业委会介入解决，若无效则启动法律程序。取证时注意保留原始记录（如未剪辑的视频），投诉时明确要求书面回复并留存回执。若需进一步协助起草投诉书或诉讼材料，可直接向我咨询具体法律文本。