在建设工程领域，仅根据建设单位被处以20万至50万的罚款，无法直接判定该事故属于较大事故还是重大事故，因为事故等级的判定主要依据事故造成的人员伤亡和直接经济损失情况，而非单纯依据罚款金额。以下是对此问题的详细分析：

一、事故等级判定标准

根据《生产安全事故报告和调查处理条例》第三条的规定，生产安全事故（包括建设工程事故）根据造成的人员伤亡或者直接经济损失，事故一般分为以下等级：

1. 特别重大事故：指造成30人以上死亡，或者100人以上重伤（包括急性工业中毒，下同），或者1亿元以上直接经济损失的事故；
2. 重大事故：指造成10人以上30人以下死亡，或者50人以上100人以下重伤，或者5000万元以上1亿元以下直接经济损失的事故；
3. 较大事故：指造成3人以上10人以下死亡，或者10人以上50人以下重伤，或者1000万元以上5000万元以下直接经济损失的事故；
4. 一般事故：指造成3人以下死亡，或者10人以下重伤，或者1000万元以下直接经济损失的事故。

二、罚款金额与事故等级的关系

罚款金额是行政机关对违法行为人进行行政处罚的一种方式，它反映了违法行为人违法行为的严重程度，但并不直接决定事故等级。事故等级的判定主要依据事故造成的人员伤亡和直接经济损失情况。因此，不能仅凭罚款金额来判断事故等级。

三、实际判定中的考虑因素

在实际判定事故等级时，除了考虑人员伤亡和直接经济损失外，还可能考虑其他因素，如事故的社会影响、是否涉及违法违规行为等。但这些因素通常是在人员伤亡和直接经济损失的基础上进行综合考量的，而不是单独作为判定事故等级的依据。

四、建议

1. 详细了解事故情况：要准确判定事故等级，需要详细了解事故造成的人员伤亡和直接经济损失情况。
2. 咨询专业机构或律师：如果对事故等级的判定存在疑问，建议咨询专业的安全生产管理机构或律师，他们可以根据具体情况提供准确的法律意见。
3. 配合调查处理：在事故发生后，建设单位应积极配合相关部门的调查处理工作，如实提供事故情况，以便准确判定事故等级并采取相应的处理措施。