在你不认罪且没有直接证据的情况下，公安一般不能直接抓人，但并非绝对不能采取任何措施。具体分析如下：
一、无直接证据时的执法限制
- 证据原则：根据《中华人民共和国刑事诉讼法》的相关规定，对有证据证明有犯罪事实的犯罪嫌疑人，才可能采取逮捕等措施。若缺乏直接证据，公安机关在常规情况下不能随意抓捕。
二、特殊情形下的临时措施
合理怀疑与紧急情形：
- 尽管没有直接证据，但如果警察有合理怀疑，并且处于紧急情形（如犯罪嫌疑人正在实施犯罪或有可能逃跑），警察可以根据《中华人民共和国人民警察法》的相关规定，对嫌疑人进行盘问、检查，甚至在特定情况下将其带至公安机关继续盘问。
后续证据收集：
- 采取上述临时措施后，警察必须尽快收集证据以验证其怀疑。如果无法在规定时间内收集到足够证据，必须释放被留置的人员。
三、无罪推定与合法权益保护
- 无罪推定原则：在法律上，任何人在未经法院依法判决之前，都应被视为无罪。因此，即使你不认罪且没有直接证据，公安机关也不能轻易采取抓捕等强制措施。
- 合法权益保护：如果你认为自己的合法权益受到侵犯，可以依法申请国家赔偿或寻求其他法律救济途径。
四、总结与建议
综上所述，在你不认罪且没有直接证据的情况下，公安机关一般不能直接抓人。但在特定情形下，警察可以基于合理怀疑采取临时措施，并必须尽快收集证据以证明其行为的合法性。如果你认为自己的权益受到侵犯，应及时寻求法律援助并保留相关证据。
我建议你保持冷静，积极配合公安机关的调查，同时关注自己的合法权益。如有进一步需要，你可以继续咨询我。