结论：雇人刷墙时，如果工人摔倒，雇主是否需要负责，这主要取决于雇主与工人之间的法律关系以及雇主是否存在过错。以下从不同角度进行分析：
一、法律关系角度
雇佣关系：
- 如果雇主与工人之间形成的是雇佣关系，即工人按照雇主的指示和要求进行工作，雇主支付报酬，那么根据《中华人民共和国民法典》中关于侵权责任的相关规定，雇主通常需要承担一定的责任。这是因为雇主有义务为工人提供安全的工作环境，并采取必要的措施防止事故发生。如果雇主未能履行这些义务，导致工人受伤，雇主可能需要承担赔偿责任。
承揽关系：
- 如果雇主与工人之间形成的是承揽关系，即工人独立完成工作，雇主只接受工作成果并支付报酬，那么雇主的责任可能会相对较轻。在承揽关系中，工人通常被视为独立承包商，他们对自己的工作安全负责。然而，如果雇主在定作、指示或者选任方面存在过失，导致工人受伤，雇主也可能需要承担一定的赔偿责任。
二、雇主过错角度
安全保障义务：
- 无论雇主与工人之间是雇佣关系还是承揽关系，雇主都有义务为工人提供安全的工作环境。这包括确保工作场所的安全、提供必要的安全设备、对工人进行安全培训等。如果雇主未能履行这些义务，导致工人摔倒受伤，雇主可能需要承担赔偿责任。
过错责任：
- 如果工人摔倒是由于雇主自身的过错（如故意或过失地提供不安全的工作条件）导致的，雇主需要承担全部或部分赔偿责任。这取决于雇主过错的程度以及工人自身是否存在过错（如未遵守安全规定）。
三、工人自身过错角度
- 如果工人摔倒是由于自身过错（如疏忽大意、未遵守安全规定等）导致的，工人可能需要自行承担部分或全部责任。然而，这并不意味着雇主完全免责，因为雇主仍然有义务提供安全的工作环境。如果雇主未能履行这一义务，即使工人自身存在过错，雇主也可能需要承担一定的赔偿责任。
四、建议与措施
明确法律关系：
- 雇主在与工人合作前，应明确双方的法律关系（雇佣关系还是承揽关系），并签订相应的合同或协议，以明确双方的权利和义务。
履行安全保障义务：
- 雇主应确保工作场所的安全，提供必要的安全设备，并对工人进行安全培训。这有助于降低事故发生的概率，并减轻雇主在事故发生后的法律责任。
及时处理事故：
- 如果工人摔倒受伤，雇主应立即采取必要的救助措施，并及时通知相关部门和保险公司。同时，雇主应积极与工人协商赔偿事宜，以避免法律纠纷的发生。
咨询专业律师：
- 在处理此类事故时，雇主可以咨询专业律师的意见，以了解自己的法律责任和应对策略。虽然我在此已给出一般性的法律建议，但具体案件仍需根据具体情况进行分析和处理。
如有更多疑问或需要进一步的法律帮助，请直接向我咨询。我将根据你的具体情况，为你提供更详细、更专业的法律建议。