首先，我们需要明确一点：在劳动工伤的情况下，赔偿的责任并不取决于受害者是否有直系亲属，而是基于劳动关系和工伤事实的存在。针对您提出的问题，以下是详细的解答：

核心结论：老板不能因受害者没有直系亲属而拒绝赔偿。

分析说明：

1. 劳动关系与工伤认定：

   • 如果受害者与雇主之间存在合法的劳动关系，并且在工作时间、工作地点因工作原因受到伤害甚至死亡，那么这通常会被认定为工伤。
   • 工伤的认定是由劳动行政部门进行的，与受害者是否有直系亲属无关。

2. 赔偿责任的法律依据：

   • 根据《工伤保险条例》等相关法律法规，一旦工伤被认定，雇主或工伤保险机构就需要承担相应的赔偿责任。
   • 赔偿责任包括但不限于医疗费用、丧葬补助金、一次性工亡补助金等，这些赔偿项目与受害者是否有直系亲属没有直接关系。

3. 直系亲属与赔偿分配：

   • 虽然直系亲属在赔偿金的分配中通常享有优先权，但这并不意味着没有直系亲属的受害者就无法获得赔偿。
   • 在没有直系亲属的情况下，赔偿金的分配可能会遵循其他法律规定或程序，比如由受害者的近亲属（如叔叔、堂兄弟等）协商分配，或者由相关部门进行保管和处理。

4. 老板拒绝赔偿的法律后果：

   • 如果老板以受害者没有直系亲属为由拒绝赔偿，那么这将是违法的。
   • 受害者或其近亲属有权向劳动行政部门投诉，要求老板承担赔偿责任。如果老板拒不履行赔偿义务，还可能面临法律诉讼和强制执行等法律后果。

综上所述，老板不能因受害者没有直系亲属而拒绝赔偿。赔偿的责任是基于劳动关系和工伤事实的存在，与受害者是否有直系亲属无关。如果老板拒绝赔偿，受害者或其近亲属有权采取法律手段维护自己的合法权益。