首先，你无需过于担忧，回迁房物业不作为并扬言要起诉你，并不意味着你一定会败诉。关键在于理清事实，明确双方权利义务，并依据相关法律法规进行处理。以下是我为你提供的具体建议：

一. 明确物业职责与你的义务

1. 物业职责：根据《物业管理条例》等相关法律法规，物业公司有义务提供物业服务，包括但不限于房屋及配套设施的维修、养护、管理，以及环境卫生、安全保卫等。
2. 你的义务：作为业主，你有义务按时交纳物业费，并遵守小区管理规定。

二. 分析物业不作为的具体情况

1. 服务不到位：如果物业公司的服务确实不到位，如未及时维修公共设施、环境卫生差等，你可以收集相关证据，如照片、视频、业主联名信等，以证明物业的不作为。
2. 费用问题：如果物业因你未按时交纳物业费而扬言起诉，你需要核实自己是否确实存在欠费情况。如果确实欠费，应尽快补交；如果不存在欠费或存在争议，应保留相关证据，如交费记录、沟通记录等。

三. 应对物业的起诉威胁

1. 保持冷静：不要因为物业的起诉威胁而恐慌。在法律面前，双方是平等的，你有权进行辩护和反驳。
2. 积极沟通：在收到起诉威胁后，你可以主动与物业公司进行沟通，尝试通过协商解决问题。如果沟通无果，再考虑法律途径。
3. 准备应诉：如果物业确实提起诉讼，你需要准备相关证据和材料，如上述提到的服务不到位证据、交费记录等，以证明自己的立场和观点。

四. 法律途径解决纠纷

1. 调解：在诉讼之前，你可以考虑通过调解方式解决纠纷。调解具有效率高、成本低、不伤和气等优点。
2. 诉讼：如果调解无果，且物业公司的起诉确实有理有据，你需要积极应诉。在诉讼过程中，你可以聘请律师为你提供法律帮助，争取自己的合法权益。

我建议：首先尝试与物业公司进行友好沟通，明确双方的问题和诉求。如果沟通无果，再考虑通过法律途径解决纠纷。同时，你要保留好相关证据和材料，以备不时之需。如有进一步需要，您可以继续咨询我。