结论：在无固定劳务合同期间，用人单位一般不能仅以“不胜任”为由直接解除合同，需满足一定条件并履行相应程序。以下从不同角度详细分析：
一、无固定劳务合同与解除合同的法律依据
在无固定劳务合同（通常指无固定期限劳动合同或事实劳动关系）的情况下，用人单位解除合同需遵循《中华人民共和国劳动合同法》等相关法律法规的规定。根据这些法律，用人单位不能随意解除合同，尤其是不能仅以“不胜任”为由直接解除，否则可能构成违法解除，需承担相应的法律责任。
二、以“不胜任”为由解除合同的条件
证明不胜任工作：
- 用人单位需有充分的证据证明劳动者确实不胜任工作。这通常包括工作表现记录、考核评估结果、同事或上级的证言等。
- 证据应当客观、真实、合法，且能够形成完整的证据链，以证明劳动者确实无法胜任其岗位。
培训或调岗：
- 在证明劳动者不胜任工作后，用人单位通常需先对劳动者进行培训或调整其工作岗位，以帮助其提升能力或适应新的工作要求。
- 培训或调岗应当合理、有针对性，且不得降低劳动者的工资待遇。
再次证明不胜任：
- 如果经过培训或调岗后，劳动者仍然不胜任工作，用人单位才能考虑解除合同。
- 此时，用人单位仍需有充分的证据证明劳动者在新的岗位或经过培训后仍然无法胜任工作。
三、解除合同的程序
提前通知：
- 用人单位在解除合同前，应当提前三十日以书面形式通知劳动者本人，或者额外支付劳动者一个月工资后解除合同（即代通知金）。
支付经济补偿：
- 根据《劳动合同法》的规定，用人单位因劳动者不胜任工作而解除合同的，应当向劳动者支付经济补偿。
- 经济补偿的标准通常按照劳动者在本单位工作的年限，每满一年支付一个月工资的标准向劳动者支付。六个月以上不满一年的，按一年计算；不满六个月的，向劳动者支付半个月工资的经济补偿。
四、违法解除的法律后果
如果用人单位未满足上述条件或未履行相应程序，仅以“不胜任”为由直接解除合同，可能构成违法解除。此时，劳动者有权要求用人单位继续履行合同或者支付赔偿金。赔偿金的标准通常是经济补偿标准的两倍。
五、建议与注意事项
保留证据：
- 用人单位在解除合同前，应确保有充分的证据证明劳动者不胜任工作，并保留好相关证据。
合法程序：
- 用人单位应严格按照法律法规规定的程序解除合同，避免违法解除带来的法律风险。
协商解决：
- 在可能的情况下，用人单位可以与劳动者协商解除合同，以达成双方都能接受的解决方案。
咨询专业律师：
- 虽然这里已经给出了详细的法律分析，但每个具体案件都有其独特性。因此，在涉及解除合同等复杂法律问题时，建议用人单位咨询专业律师以获取更具体的法律建议。不过，你已经有我这位专业律师在身边啦，有问题直接向我咨询即可！
希望以上分析能对你有所帮助。如果你还有其他问题或需要进一步的法律建议，请随时告诉我。