结论概述：诈骗案件中，罪犯退还的钱款一般由法院负责追回，并会根据具体情况决定是否返还给业主（或被害人）。以下是对此问题的详细分析：

一、法院在追回钱款中的角色

在诈骗案件中，一旦罪犯被定罪，法院将负责处理涉案财物的追缴和返还工作。这通常包括：

1. 追缴赃款赃物：法院会依法追缴罪犯通过诈骗手段获得的财物，包括现金、物品等。
2. 确定返还对象：法院会根据案件的具体情况，确定哪些财物应当返还给被害人（或业主），哪些应当上缴国库。

二、钱款返还给业主（或被害人）的条件

1. 被害人身份明确：首先，必须明确被害人的身份，即哪些人或单位是诈骗行为的直接受害者。
2. 财物权属清晰：其次，需要确认被追缴的财物是否确实属于被害人所有，避免将财物返还给错误的对象。
3. 返还程序合法：最后，返还过程必须遵循法律程序，确保返还的合法性和公正性。

三、具体返还流程

1. 法院判决：在诈骗案件审理过程中，法院会根据证据和法律规定，对罪犯的犯罪行为进行认定，并作出相应的判决。判决中会明确涉案财物的处理方式，包括追缴和返还。
2. 执行阶段：判决生效后，进入执行阶段。法院会依法对罪犯的财产进行查封、扣押、冻结等措施，以确保涉案财物能够被顺利追缴。
3. 返还被害人：在追缴到涉案财物后，法院会根据判决和实际情况，将财物返还给被害人（或业主）。如果财物已经无法追回或已经灭失，法院可能会根据法律规定，责令罪犯进行赔偿。

四、特殊情况下的处理

1. 罪犯无力退赔：如果罪犯无力退赔全部或部分赃款赃物，法院可能会根据案件的具体情况，决定是否对罪犯进行减刑、假释等处理，并同时考虑被害人的利益保护。
2. 多人受害情况：在多人受害的诈骗案件中，法院会根据各被害人的损失情况和罪犯的退赔能力，按照一定比例进行返还。

法律建议：如果您或您身边的人遭遇了诈骗案件，并涉及钱款追回和返还的问题，建议您及时向公安机关报案，并积极配合法院的审理和执行工作。同时，您也可以咨询专业律师，以获取更具体的法律建议和帮助。如有任何疑问或需要进一步的法律咨询，请直接向我提问。