首先，对于“不是故意把对方家里老人撞死，可以在老人后事的时候去吗”这个问题，核心在于询问者在非故意造成交通事故导致对方老人去世后，是否适合或应当参与老人的后事处理。

从法律角度来看：

1. 无直接法律规定：我国法律并未明确规定在这种情况下，肇事者是否必须或禁止参与死者的后事处理。
2. 道德考量：虽然法律没有明确规定，但从道德和人情世故的角度出发，肇事者是否参与后事处理需要谨慎考虑。一方面，参与可能被视为对死者家属的慰问和对自己行为的弥补；另一方面，也可能因家属的情绪波动而引发不必要的冲突。

从实际情况出发：

1. 尊重家属意愿：最重要的是要尊重死者家属的意愿。如果家属表示接受并希望肇事者能参与后事，那么可以适度参与；如果家属明确表示反对或不满，那么应当尊重家属的选择，避免造成更多伤害。
2. 避免二次伤害：在参与后事处理时，肇事者应当保持低调和尊重，避免任何可能引发家属情绪波动或不满的行为。

综上所述：

• 法律上并未明确规定肇事者是否必须或禁止参与死者的后事处理。
• 从道德和实际情况出发，是否参与需要谨慎考虑，并充分尊重死者家属的意愿。
• 如果决定参与，应当保持低调和尊重，避免造成二次伤害。

因此，你可以根据死者家属的意愿和实际情况来决定是否参与老人的后事处理。如果有任何疑问或需要进一步的法律建议，可以随时向我咨询。