结论：群众一般无权仅因某成员不参加集体义务劳动就拒绝其受益，但具体还需结合集体规定、成员约定以及相关法律法规来综合判断。
分析说明：
集体义务劳动的性质：
- 集体义务劳动通常是集体内部为了共同利益而组织的活动，它体现了成员之间的互助合作精神。然而，不参加集体义务劳动并不直接等同于放弃在集体中的其他权益或受益权。
成员权益与义务：
- 在集体中，每个成员通常都享有一定的权益，如使用集体资源、参与集体决策、分享集体成果等。同时，成员也有义务遵守集体规定、参与集体活动等。但这些权益和义务通常需要在集体章程或相关协议中明确规定。
- 如果集体章程或相关协议中明确规定了不参加集体义务劳动将导致失去某些受益权，那么在这种情况下，群众有权根据规定拒绝不参加者受益。
法律法规的考量：
- 在没有具体集体规定或成员约定的情况下，群众一般无权仅因某成员不参加集体义务劳动就拒绝其受益。因为这可能涉及到侵犯成员的合法权益，如平等权、受益权等。
- 如果群众的行为违反了相关法律法规，如侵犯了成员的财产权、人身权等，那么不参加集体义务劳动的成员有权依法维护自己的权益。
实际情况的复杂性：
- 在实际操作中，集体义务劳动和受益权的分配可能因集体性质、成员关系、活动目的等多种因素而有所不同。因此，在处理这类问题时，需要综合考虑各种因素，确保公平合理。
特殊场景：
- 如果集体是一个基于特定目的（如宗教、慈善等）而成立的非营利组织，且其章程或相关协议中明确规定了成员必须参加集体义务劳动以维持其受益资格，那么在这种情况下，群众有权根据规定拒绝不参加者受益。
- 如果不参加集体义务劳动的行为严重损害了集体的利益或声誉，且集体章程或相关协议中对此有明确的处罚规定，那么群众也可以根据规定对不参加者进行相应的处罚，包括拒绝其受益。
行动建议：
- 对于集体而言，建议制定明确的章程或相关协议，明确规定成员的权利和义务，以及不参加集体义务劳动的后果。这样可以避免不必要的纠纷和争议。
- 对于成员而言，如果遇到群众无理拒绝其受益的情况，可以首先尝试与群众进行沟通协商，寻求解决方案。如果协商无果，可以考虑依法维护自己的权益。
如果有任何关于劳动纠纷或建设工程领域的法律问题，都可以直接向我咨询，我会尽我所能为你提供专业的法律帮助。