可以直接起诉，但需满足一定条件并遵循相应流程。以下从多个角度为您详细分析：
一、法律基础与起诉条件
根据《中华人民共和国民法典》的相关规定，侵权行为造成他人财产损害的，侵权人应当承担赔偿责任。在您的情况下，邻居恶意破坏您的房屋，属于典型的侵权行为，您有权要求其承担赔偿责任。
起诉条件主要包括：
- 明确的被告：您需要知道邻居的姓名、住址等基本信息，以便在起诉时明确被告。
- 具体的诉讼请求和事实、理由：您需要明确要求邻居赔偿的具体金额或修复房屋的具体要求，并陈述邻居破坏房屋的事实及理由。
- 属于人民法院受理民事诉讼的范围和受诉人民法院管辖：您需要确保您的案件属于人民法院的受理范围，并选择有管辖权的法院进行起诉。
二、起诉前的准备
在起诉前，建议您先收集并固定相关证据，以支持您的诉讼请求。这些证据可能包括：
- 现场照片或视频：展示房屋被破坏的现状。
- 证人证言：如果有目击者，可以请其提供证言。
- 报警记录或相关部门的处理意见：虽然您提到不报警，但如果有报警记录或相关部门的处理意见，将更有助于证明邻居的侵权行为。
- 损失评估报告：如果可能，可以请专业机构对房屋的损失进行评估，以确定具体的赔偿金额。
三、起诉流程
- 撰写起诉状：您需要撰写一份起诉状，明确列出您的诉讼请求、事实和理由，并附上相关证据。
- 提交起诉状：将起诉状提交给有管辖权的人民法院，并缴纳诉讼费用。
- 等待法院受理：法院在收到起诉状后，会进行审查，如果符合起诉条件，会予以受理，并通知您开庭时间。
- 参加庭审：在庭审过程中，您需要陈述事实、提供证据，并回答法官和对方当事人的提问。
- 等待判决：庭审结束后，法院会进行判决，确定邻居是否需要承担赔偿责任及赔偿的具体金额。
四、不报警直接起诉的利弊分析
利：
- 直接寻求法律救济：不报警直接起诉可以更快地进入法律程序，寻求法律救济。
- 避免报警可能带来的复杂程序：报警后，可能需要等待警方调查、取证等程序，而直接起诉可以绕过这些程序，直接进入诉讼阶段。
弊：
- 证据收集可能受限：不报警可能导致一些证据无法及时收集或固定，如现场勘查记录、警方调查报告等。
- 可能面临对方当事人的反驳：如果对方当事人对您的指控提出反驳，而您缺乏足够的证据支持，可能会影响案件的审理结果。
五、建议
- 在起诉前尽量收集并固定证据：以支持您的诉讼请求。
- 考虑咨询专业律师：虽然您可以直接起诉，但咨询专业律师可以为您提供更全面的法律建议和帮助，确保您的权益得到充分保障。
- 权衡利弊后做出决策：根据您的具体情况和需求，权衡不报警直接起诉的利弊后做出决策。
如果您有任何疑问或需要进一步的法律帮助，请直接向我咨询。