受害人不能随意放弃追究所有的法律责任，这取决于案件的性质以及法律的具体规定。

一. 自诉案件中的放弃权利

• 对于自诉案件，如侮辱罪、诽谤罪等，受害人拥有决定是否提起诉讼的权利。在正式提起诉讼之前，他们可以自由选择是否放弃追究相关人员的刑事责任。这是因为这类案件通常涉及个人权益，法律允许受害人有一定的自主权。

二. 公诉案件中的限制

• 然而，对于公诉案件，即由国家司法机关主动追究犯罪嫌疑人的刑事责任的案件，受害人不能单方面放弃追究。这类案件通常涉及社会公共利益，不仅仅是个人的私权纠纷。
• 除非存在法律明确规定的无需追究刑事责任的情况，如犯罪已过追诉时效期限、经特赦令免除刑罚、犯罪嫌疑人或被告人死亡等，否则司法机关将依法追究犯罪嫌疑人的刑事责任。

三. 法律的具体规定

• 根据《中华人民共和国刑事诉讼法》的相关规定，刑事责任的放弃追究有严格的法定情形，如情节显著轻微、危害不大不认为是犯罪的，或者犯罪已过追诉时效期限等。
• 此外，刑事责任的豁免条件也包括无刑事责任能力人、正当防卫、紧急避险等情况。

我建议：受害人在考虑是否放弃追究法律责任时，应充分了解案件的性质以及法律的具体规定。如果案件涉及社会公共利益或严重违法行为，即使受害人希望放弃追究，司法机关也可能依法进行干预。因此，最好咨询专业律师以获取准确的法律建议。如有进一步需要，您可以继续咨询我。