结论：清洁阿姨每天工作4小时，虽然法律未强制要求必须签订书面合同，但签订书面合同是明智且必要的选择，这有助于明确双方权利义务，避免纠纷，保障双方合法权益。
详细分析：
法律基础与灵活性：
- 根据《劳动合同法》的规定，对于非全日制用工（即平均每日工作时间不超过四小时，每周工作时间累计不超过二十四小时），双方当事人可以订立口头协议。这意味着，从法律层面讲，清洁阿姨每天工作4小时，公司与其之间并非必须签订书面合同。
签订合同的必要性：
- 明确权利义务，避免纠纷：尽管法律允许非全日制用工采用口头形式，但签订书面合同能够详细列明工作内容、工作时间、薪酬待遇等关键条款，确保双方在履行过程中有明确的依据。这有助于提升工作效率，减少因约定不明而产生的误解和纠纷。例如，通过合同约定具体的清洁区域和标准，可以避免因工作成果不符合预期而引发的争议。
- 保障劳动者合法权益：对于清洁阿姨而言，合同是维护其劳动权益的重要工具。它确保了阿姨在法定节假日加班时能够获得加班费，以及公司应提供必要的劳动保护用品等。若公司未履行合同义务，阿姨可以依法维权，要求公司承担相应责任。
- 保护公司利益：同时，合同也是公司保护自身利益的有效手段。通过约定工作纪律、保密义务等内容，公司可以在清洁阿姨违反约定时，依据合同条款要求其承担相应责任，如赔偿损失等。
- 简化纠纷解决流程：在发生争议时，书面合同作为直接证据，能够大大简化纠纷解决的流程和时间成本。相比口头协议，书面合同更具法律效力，更容易被法院或仲裁机构采纳为定案依据。
实际操作建议：
- 考虑到实际操作中的种种风险和潜在纠纷，建议公司在聘请清洁阿姨时务必签订书面合同，并确保合同条款的合法性和有效性。合同内容应包括但不限于：工作内容、工作时间、薪酬待遇、福利待遇、工作纪律、保密义务、违约责任等。
- 在签订合同前，公司应仔细审查合同条款，确保无遗漏或模糊之处。同时，也应向清洁阿姨充分解释合同内容，确保其理解并同意合同条款。
后续行动建议：
- 若您作为公司方，在聘请清洁阿姨时，应主动提出签订书面合同，以明确双方权利义务，避免后续纠纷。
- 若您作为清洁阿姨，在接受工作时，也应主动要求签订书面合同，以保障自己的合法权益。
- 若在合同签订或履行过程中遇到任何问题，如合同条款不明确、公司未履行合同义务等，均可直接向我咨询，我将为您提供专业的法律建议。