结论：逾期交房的违约金按实际损失计算时，这里的“实际损失”确实主要指的是购房者的损失。不过，具体损失的认定和计算方式需结合合同约定及法律规定综合判断。

分析说明：

1. 实际损失的定义：

   • 在逾期交房的情境中，实际损失通常指的是购房者因开发商未能按时交房而遭受的具体经济损失。这包括但不限于购房者因租房产生的额外费用、因房屋用途改变（如自住变出租）而产生的损失，以及因房屋价值变动（如市场价格上涨）而可能遭受的潜在损失等。

2. 合同约定与法律规定：

   • 购房合同中往往会就逾期交房的违约金或赔偿方式进行明确约定。如果合同中明确规定了违约金按实际损失计算，那么这里的实际损失就应当按照合同约定的范围和方式进行认定。
   • 若合同未明确约定，则需依据《民法典》等相关法律法规的规定来确定实际损失的范围和计算方式。根据《民法典》的相关规定，当事人一方不履行合同义务或者履行合同义务不符合约定，造成对方损失的，损失赔偿额应当相当于因违约所造成的损失，包括合同履行后可以获得的利益；但是，不得超过违约一方订立合同时预见到或者应当预见到的因违约可能造成的损失。

3. 实际损失的计算与举证：

   • 在实际操作中，购房者需要就其因逾期交房而遭受的实际损失进行举证。这可能需要购房者提供相关的证据材料，如租房合同、租金支付凭证、房屋价值评估报告等。
   • 开发商则有权对购房者提出的实际损失进行抗辩，并可能要求购房者提供进一步的证据来支持其主张。

4. 特殊情况下的处理：

   • 如果购房者因逾期交房而遭受的损失难以准确计算，或者双方对损失的计算方式存在争议，那么法院或仲裁机构可能会根据公平原则、诚实信用原则等法律原则，结合案件的具体情况，对实际损失进行合理估算或判定。

行动建议：

• 购房者：在遭遇逾期交房时，应及时收集并保存相关证据材料，以便在需要时证明自己的实际损失。同时，可以与开发商进行协商，尝试通过友好方式解决纠纷。如果协商无果，可以考虑通过法律途径维护自己的合法权益。
• 开发商：应严格遵守合同约定，按时交房。如果因特殊原因确实需要逾期交房，应及时与购房者沟通并说明情况，尽量减少购房者的损失。同时，也应做好应对购房者索赔的准备，包括收集相关证据材料、制定合理的赔偿方案等。

如有任何进一步疑问或需要法律帮助，请直接向我咨询。