灵活就业人员的社会保险费在一定条件下是可以申请退费的。具体来说，如果因为税务机关的误收或者缴费人多缴了费用，那么这部分应退还给灵活就业人员的费款是可以申请退还的。

申请退费的条件主要是基于税务机关的误收或多缴，这需要缴费人提供相应的证明材料，并确保材料的真实性和合法性。办理退费的地点可以通过多种方式进行，包括电子税务局、一网通办、随申办APP、社区事务受理服务中心以及办税服务厅等。在提交退费申请后，主管税务机关会受理并审核，然后将退费信息传递给人社或医保部门，由这些部门将款项退还给缴费人。

值得注意的是，退费申请的办理时间和具体流程可能会因地区和具体情况而有所不同。因此，建议缴费人在申请退费前，先咨询当地的主管税务机关或拨打12366税务热线，以获取最准确的信息和流程指导。

此外，缴费人还需要注意一些事项，比如确保提供的各项资料真实有效，如果是复印件则需要注明“与原件一致”并签章。如果此前未进行存款账户账号报告，还需要提供社保卡或退费账户银行卡的复印件。

总的来说，灵活就业人员的社会保险费在一定条件下是可以申请退费的，但需要满足一定的条件和提供相应的证明材料。希望这个解答能对你有所帮助。