结论：在您描述的情况下，即您砸了别人家但缺乏直接证据证明是您所为，处理方式将取决于多种因素，包括现场证据、目击者证言、您的陈述以及其他间接证据。以下是从不同角度对此问题的全面分析。
一、法律责任与证据规则
法律责任：
- 根据《中华人民共和国民法典》的相关规定，行为人因过错侵害他人民事权益造成损害的，应当承担侵权责任。这意味着，如果您确实砸了别人家，即使没有直接证据，但如果有其他证据足以证明您的行为，您仍可能承担法律责任。
证据规则：
- 在民事诉讼中，证据的充分性和证明力是决定案件胜负的关键。直接证据（如监控录像、目击者证言直接指认您）固然重要，但间接证据（如现场遗留的物品、您的行为模式、与受害者的关系等）也可能形成完整的证据链，从而证明您的行为。
二、可能的情况与处理方式
缺乏直接证据，但有其他间接证据：
- 如果现场留下了与您相关的物品（如您的工具、衣物等），或者您的行为模式与案件相符（如您之前与受害者有过冲突），这些间接证据可能被用来推断您的行为。
- 在这种情况下，您可能会面临被指控的风险。建议您及时咨询专业律师，了解您的法律权利和义务，以及可能的辩护策略。
完全缺乏证据：
- 如果确实没有任何证据指向您，包括直接证据和间接证据，那么从法律上讲，您可能不会被认定为行为人。
- 然而，这并不意味着您可以完全置身事外。如果受害者或其他相关方持续对您进行指控或骚扰，您可能需要通过法律途径来维护自己的名誉权和隐私权。
三、建议与措施
保持冷静，不要自行调查：
- 在这种情况下，保持冷静至关重要。不要试图自行调查或销毁可能存在的证据，这可能会使您陷入更不利的境地。
及时咨询专业律师：
- 无论您是否认为自己有错，都应及时咨询专业律师。律师可以为您提供法律建议，帮助您了解可能的法律后果，并制定合适的应对策略。
准备应对可能的法律程序：
- 如果受害者选择通过法律途径解决问题，您可能需要参与民事诉讼或刑事调查。在这种情况下，您应配合律师的工作，提供必要的证据和信息。
考虑和解或调解：
- 如果双方都有和解的意愿，可以考虑通过和解或调解来解决纠纷。这可以节省时间和金钱，并避免长期的法律纠纷。
四、可能的法律后果
- 如果您被证明是行为人，您可能需要承担民事赔偿责任，包括赔偿受害者的财产损失和精神损害等。
- 在某些情况下，如果您的行为构成犯罪（如故意毁坏财物罪），您还可能面临刑事责任。
最后，我建议您在面对此类情况时，务必保持冷静，不要轻举妄动。及时咨询专业律师，了解您的法律权利和义务，以及可能的法律后果。如果您有任何法律问题或需要进一步的法律建议，请直接向我咨询。