如果您不想继续担任五保户的监护人，这确实是一个需要谨慎处理的问题，因为监护人的责任重大，涉及到被监护人的基本生活保障和权益保护。以下是一些建议，希望能帮助您妥善处理这个问题：
一、了解相关法律法规
首先，您需要了解关于监护人变更或解除的相关法律法规。在我国，监护人的设立、变更和解除通常受到《民法典》等相关法律的规范。您可以查阅相关法律条文，或者咨询当地法律援助中心、律师事务所等机构，以获取专业的法律意见。
二、与相关部门沟通
联系当地民政部门：五保户通常属于民政部门的救助对象，您可以与当地民政部门取得联系，说明您的情况，询问变更监护人的具体流程和所需材料。
咨询社区或村委会：社区或村委会作为基层组织，通常对五保户的情况有所了解，他们也可以提供一定的帮助和指导。
三、提出变更监护人的申请
准备相关材料：根据当地民政部门或法律机构的要求，准备变更监护人的申请书、身份证明、与被监护人的关系证明等材料。
提交申请：将准备好的材料提交给当地民政部门或相关机构，并按照他们的要求进行后续操作。
四、考虑替代监护人
在提出变更监护人的申请时，您需要同时考虑并推荐一个合适的替代监护人。这个替代监护人应该是有能力、有意愿并符合法律规定的条件来担任监护人的人。
五、关注变更过程及结果
跟进变更进度：在提交申请后，您可以定期与当地民政部门或相关机构联系，了解变更监护人的进度和结果。
确保被监护人权益：在变更过程中，您需要确保被监护人的基本生活不受影响，他们的权益得到妥善保护。
六、法律途径（如必要）
如果与相关部门沟通无果，或者变更监护人的过程中遇到法律障碍，您可以考虑通过法律途径来解决。这包括向法院提起诉讼，请求法院变更监护人等。
注意事项
希望以上建议能对您有所帮助。如果您在处理过程中遇到任何困难或疑问，建议及时咨询专业法律人士或相关机构以获取更具体的指导。