干部调动会议记录人没有回避，并不必然导致调动程序无效或可撤销。具体分析如下：

1. 回避制度的适用范围：

   • 回避制度主要适用于可能影响公正处理的情形，如亲属关系、利害关系等。在干部调动会议中，若记录人与调动事项无直接利害关系，其未回避并不一定违反回避制度。

2. 程序瑕疵与实体公正：

   • 即便记录人未回避被视为程序上的小瑕疵，也不必然影响调动决定的实体公正。法院或相关机构在审查时，会综合考虑程序瑕疵的严重程度、是否影响实体公正等因素。

3. 法律后果与救济途径：

   • 若认为记录人未回避导致程序严重不公，可以依法提出异议或申请撤销调动决定。但在此之前，需要充分举证证明记录人的未回避确实影响了调动决定的公正性。
   • 若调动决定已被执行，且未对当事人造成实质性损害，法院或相关机构可能会倾向于维持原决定，同时指出程序上的不足并要求改进。

4. 建议与措施：

   • 为避免类似情况再次发生，建议相关机构在干部调动会议中严格遵守回避制度，确保程序的公正性和透明度。
   • 若当事人对调动决定有异议，应及时咨询专业律师，了解具体的法律救济途径和程序要求。

综上所述，干部调动会议记录人没有回避并不必然导致严重的法律后果。但为确保程序的公正性和合法性，建议相关机构在类似情况下严格遵守回避制度，并妥善处理可能存在的程序瑕疵。如有任何疑问或需要进一步的法律咨询，请直接向我提问。