结论：在行政单位不给予处理意见，导致办不了社会保险及退休手续的情况下，一般不可以直接提起行政诉讼，但存在一些例外情形，以下为你详细分析：

一般情况下不可直接行政诉讼

1. 行政诉讼受理范围限制：根据《中华人民共和国行政诉讼法》的规定，行政诉讼主要受理公民、法人或者其他组织认为行政机关和行政机关工作人员的行政行为侵犯其合法权益的案件。行政单位不给予处理意见，若该不作为行为尚未对当事人的权利义务产生实际影响，或者不属于法律规定的行政诉讼受案范围，那么法院可能不会受理。例如，行政单位只是暂时未给出处理意见，但后续有明确的工作流程和时间安排来处理相关事宜，此时就不构成可直接诉讼的情形。
2. 前置程序要求：在很多情况下，对于行政单位的不作为，需要先经过行政复议等前置程序。行政复议是公民、法人或者其他组织认为具体行政行为侵犯其合法权益，向行政复议机关提出申请，由行政复议机关依法对该具体行政行为进行审查并作出决定的一种制度。如果法律、法规规定必须先经过行政复议，当事人没有经过该程序就直接提起行政诉讼，法院可能会不予受理。比如，在某些涉及社会保险的具体行政行为争议中，法律规定需要先向上一级行政机关申请复议，对复议结果不服的，才能向法院提起诉讼。

例外情形下可直接行政诉讼

1. 法律明确规定的可诉不作为：如果法律明确规定行政单位在特定情况下必须作出处理意见，而其不作为直接侵犯了当事人的合法权益，且该不作为属于行政诉讼的受案范围，那么当事人可以直接提起行政诉讼。例如，根据相关社会保险法律法规，行政单位有明确的职责和期限来处理社会保险及退休手续相关事宜，若其超过法定期限仍未给出处理意见，导致当事人无法办理相关手续，影响了其合法权益，此时当事人可以直接向法院提起行政诉讼。
2. 紧急情况下的特殊处理：在一些紧急情况下，如果不及时提起行政诉讼，当事人的合法权益将受到难以弥补的损害，法院也可能会受理当事人的直接起诉。比如，当事人因未办理社会保险及退休手续，导致无法及时享受应有的医疗保障等待遇，且情况紧急，此时可以向法院说明情况，请求法院直接受理。

建议：

1. 收集证据：在考虑是否提起行政诉讼之前，要尽可能收集能够证明行政单位不作为的证据，如向行政单位提交的申请材料、沟通记录、行政单位承诺的处理期限等。这些证据将有助于在诉讼中证明行政单位的违法行为以及自身权益受到的损害。
2. 咨询专业意见：由于行政诉讼涉及复杂的法律程序和法律规定，建议你在决定是否提起诉讼之前，向我详细咨询。我可以根据你的具体情况，为你分析诉讼的可行性和风险，并提供相应的法律建议。
3. 尝试其他途径解决：除了行政诉讼，你还可以尝试通过与行政单位协商、向上级行政机关反映情况等方式来解决问题。有时候，通过沟通协调可以更高效地解决争议，避免漫长的诉讼程序。