结论：社区工作者行政拘留过了三年，是否能解除劳动合同，这主要取决于劳动合同中的具体约定以及相关法律法规的规定，同时需考虑行政拘留行为对劳动合同履行的影响程度。以下从不同角度进行分析：
劳动合同约定角度：
- 如果劳动合同中明确规定了员工因违法行为（包括行政拘留）被处罚后，用人单位有权解除劳动合同，且该约定不违反法律法规的强制性规定，那么用人单位在员工被行政拘留且已过三年后，若认为该行为对劳动合同的履行造成了重大影响，仍有可能依据合同约定解除劳动合同。但需注意，解除劳动合同需遵循法定程序，如提前通知、支付经济补偿等（若适用）。
- 如果劳动合同中没有明确约定此类情形下的解除权，用人单位则不能仅凭行政拘留这一事实直接解除劳动合同，而需考虑其他法定或约定的解除条件。
法律法规规定角度：
- 根据《中华人民共和国劳动合同法》的相关规定，用人单位解除劳动合同通常需基于员工严重违反用人单位的规章制度、严重失职或营私舞弊给用人单位造成重大损害、被依法追究刑事责任等法定情形。行政拘留属于行政处罚，并非刑事处罚，因此，单纯因行政拘留并不直接构成用人单位解除劳动合同的法定理由。
- 然而，如果行政拘留行为导致员工无法继续履行劳动合同（如因拘留期间无法到岗工作），且该行为对用人单位的生产经营造成了重大影响，用人单位在符合法定程序的前提下，可能有权解除劳动合同。但这种情况下的解除需谨慎处理，并需充分证明行政拘留行为与劳动合同无法履行之间的直接关联性。
行政拘留行为对劳动合同履行的影响程度：
- 行政拘留虽然是一种行政处罚，但其对员工个人声誉和职业发展的影响可能因具体情况而异。如果行政拘留行为并未对员工的职业能力和信誉造成实质性损害，且员工在拘留期满后能够正常履行劳动合同，那么用人单位通常无权仅凭此事实解除劳动合同。
- 如果行政拘留行为导致员工在行业内声誉受损、无法继续从事原工作或对用人单位造成其他负面影响，用人单位在评估这些影响后，可能认为劳动合同已无法继续履行，从而选择解除劳动合同。但同样需要遵循法定程序和规定。
建议：
- 对于社区工作者而言，如果面临行政拘留且担心影响劳动合同的履行，建议及时与用人单位沟通，说明情况并寻求解决方案。
- 用人单位在考虑解除劳动合同时，应谨慎评估行政拘留行为对劳动合同履行的影响程度，并确保解除行为符合法律法规的规定和劳动合同的约定。
- 如果双方对解除劳动合同存在争议，建议通过协商、调解或仲裁等合法途径解决纠纷。
如有更多关于劳动工伤、合同纠纷等方面的法律问题，欢迎直接向我咨询。