不可以向保险公司说不理赔。针对您提出的问题，以下是我从法律角度进行的详细分析：
一. 关于撞坏树木的责任认定
首先，撞坏树木属于交通事故的一种，即使不涉及其他车辆或行人，也需承担相应的法律责任。树木作为公共设施或私人财产，其损坏应得到相应的赔偿。
二. 保险公司的理赔责任
- 保险合同的约定：您提到已经走全损，这意味着您可能购买了车损险或其他相关保险。根据保险合同的约定，保险公司对于被保险车辆在保险期间内发生的意外事故导致的损失，应承担相应的赔偿责任。
- 保险公司的理赔流程：一般来说，保险公司接到报案后，会进行查勘定损，然后根据保险合同的约定进行赔付。在此过程中，保险公司会核实事故的真实性、损失程度以及是否符合保险条款的理赔条件。
三. 损失方不联系对理赔的影响
- 不影响保险公司的理赔责任：损失方是否联系您，并不影响保险公司对您车辆的理赔责任。只要事故真实发生，且符合保险合同的约定，保险公司就应依法进行赔付。
- 建议主动联系损失方：尽管损失方不联系您，但作为车主，您仍有责任主动与损失方（如市政部门或树木的所有者）联系，协商赔偿事宜。这有助于尽快解决纠纷，避免后续可能出现的法律问题。
四. 保险公司的拒赔情形
根据相关法律法规及保险合同的约定，保险公司拒赔的情形通常包括：
- 酒后驾车、无证驾驶等违法违规行为：这些行为严重违反道路交通安全法规，保险公司有权拒赔。
- 事故后未及时通知保险公司：根据《中华人民共和国保险法》第二十一条的规定，投保人、被保险人或者受益人知道保险事故发生后，应当及时通知保险人。故意或者因重大过失未及时通知，致使保险事故的性质、原因、损失程度等难以确定的，保险人对无法确定的部分，不承担赔偿或者给付保险金的责任。
- 其他不属于保险责任范围的情形：如车辆自然磨损、故意损坏等。
我的观点：在您的情况下，由于已经走全损且事故真实发生，保险公司应承担相应的理赔责任。即使损失方不联系您，您也不能以此为由向保险公司说不理赔。相反，您应主动与损失方联系，协商赔偿事宜，并尽快向保险公司报案，以便顺利完成理赔流程。如有进一步需要，您可以继续咨询我。