针对您提出的“单位没有缴纳社保，个人交灵活就业能否起诉要求退还”的问题，以下是我的详细解答：

首先，我们需要明确的是，根据《中华人民共和国劳动法》和《中华人民共和国社会保险法》的相关规定，用人单位和劳动者必须依法参加社会保险，并缴纳社会保险费。这是用人单位的法定义务，旨在保障劳动者在年老、患病、工伤、失业、生育等情况下能够获得相应的帮助和补偿。

当单位未依法为劳动者缴纳社会保险时，劳动者为了维护自身的合法权益，可能会选择以灵活就业者的身份自行缴纳社会保险费用。这种情况下，劳动者实际上承担了本应由单位承担的部分费用。

接下来，我们分析劳动者是否有权要求单位退还这部分费用。从法律角度来看，劳动者为自身合法权益代为缴纳社保费用后，与单位之间就形成了平等主体之间的债权债务法律关系。也就是说，劳动者有权就其代单位缴纳的部分向单位追偿。

在实际操作中，如果劳动者决定通过法律途径来维护自己的权益，可以先向劳动人事争议仲裁委员会申请仲裁。但需要注意的是，仲裁委可能会以该争议不属于其管辖范围为由作出不予受理的决定。此时，劳动者可以进一步向法院提起诉讼。

法院在审理此类案件时，会综合考虑劳动者与单位之间的劳动关系、单位未依法缴纳社会保险的事实以及劳动者自行缴纳的费用情况等因素。如果法院认定单位确实违反了法定义务，未依法为劳动者缴纳社会保险，而劳动者为了自身合法权益代为缴纳了费用，那么法院通常会支持劳动者的诉讼请求，判决单位支付劳动者保险垫付款。

综上所述，如果单位没有为您缴纳社保，而您以灵活就业者的身份自行缴纳了相关费用，您是有权通过法律途径要求单位退还这部分费用的。但具体操作时，建议您先咨询专业的法律人士或律师，以确保您的权益得到充分保障。