当您发现自家的荒地被人损坏时，这确实是一个令人不悦且需要妥善处理的问题。为了有效维护您的权益，我建议您按照以下步骤来操作：

一、固定证据

这是处理此类问题的首要且关键步骤。您需要迅速对破坏现场进行多角度的拍照和录像，确保能够清晰记录土地被破坏的范围、程度以及具体的损害情况，比如被翻动的土壤、被破坏的植被等。同时，如果现场有遗留的工具、车辆零部件等物品，也请妥善保存，这些可能成为日后追责的重要证据。如果有目击者，及时与他们沟通并获取书面证人证言，同时留下联系方式以便后续联系。

二、尝试沟通与协商

在固定好证据后，您需要尝试确定破坏土地的行为人，并与他们进行友好协商。在协商过程中，以平和的方式表达您的不满，要求对方说明破坏原因，并提出合理的赔偿要求。为了确保协商过程有据可查，您可以在合法合规的前提下，录音记录协商过程。

三、寻求第三方调解

如果协商无果，您可以考虑寻求第三方调解。您可以向村委会或居委会详细说明情况，请求他们组织双方进行调解。如果调解不成，您还可以向乡镇政府或街道办事处申请调解，利用他们的行政管理和调解职能来解决纠纷。

四、向相关部门投诉举报

如果破坏行为涉及非法占用、改变土地用途等违法行为，或者严重影响农业生产，如损害农田基础设施、污染土壤等，您可以向当地自然资源局或农业农村部门进行投诉举报。这些部门有责任和权力对违法行为进行调查和处理。

五、提起民事诉讼

如果以上途径均无法解决问题，您可以考虑提起民事诉讼。在提起诉讼前，您需要准备充分的诉讼材料，包括起诉状、证据清单等。然后向有管辖权的人民法院提交材料，参加庭审并充分阐述您的观点。如果胜诉且对方未履行判决，您还可以向法院申请强制执行。

六、追究刑事责任（如适用）

如果破坏行为情节严重，涉嫌犯罪，如造成耕地大量毁坏等，相关部门将依法追究刑事责任。在这种情况下，您需要配合司法机关的工作，并提供相关证据以支持案件的调查和处理。

总结与建议：

面对土地被破坏的情况，您应保持冷静并妥善处理。首先确保证据充足，然后依次尝试沟通协商、第三方调解、投诉举报等途径。在必要时，不要犹豫提起民事诉讼或追究刑事责任。同时，我建议您在整个过程中如有任何法律疑问或需要专业帮助，请及时咨询专业律师以确保您的权益得到充分保护。