您与奶奶的弟弟的儿子在同一单位工作，并不直接构成职务回避的法定情形。以下是对此问题的详细分析：
职务回避的法定情形
职务回避通常指的是在公务活动中，因特定亲属关系或其他关系，可能影响公正执行公务时，相关人员需要回避的制度。在劳动法律关系中，虽然不像公务员法那样有明确的职务回避规定，但某些特定行业或单位（如国有企业、事业单位、政府机关等）可能根据内部规章制度或行业规范，设定了类似的回避要求。然而，这些回避要求通常针对的是直接上下级关系、存在利益冲突的关系等，而非泛泛的亲属关系。
亲属关系的界定
您提到的“奶奶的弟弟的儿子”，在亲属关系上属于您的远房堂兄弟。这种关系在一般的社交和日常生活中可能被视为有一定亲缘关系的亲属，但在法律上，特别是职务回避的语境下，这种关系通常不被视为需要回避的紧密亲属关系。
实际情况分析
无直接利益冲突：除非您与这位远房堂兄弟在同一部门担任直接上下级职务，或者存在其他可能影响公正执行公务的情形（如共同参与某个项目的决策、执行等），否则仅因在同一单位工作，并不构成职务回避的理由。
单位内部规定：如果您的单位有特定的回避规定，且这些规定明确将远房堂兄弟关系纳入回避范围，那么您可能需要遵守这些规定。但这种情况较为罕见，且通常会在单位的规章制度或员工手册中明确说明。
行业规范：某些特定行业（如金融、医疗等）可能因行业特殊性，对员工的亲属关系有更为严格的要求。但即便如此，这些要求也通常针对的是直接亲属关系（如配偶、父母、子女等），而非远房堂兄弟关系。
建议
查阅单位规章制度：如果您对单位的回避规定有疑问，建议查阅单位的规章制度或员工手册，以了解是否有相关规定。
咨询人力资源部门：如果您仍然不确定，可以咨询单位的人力资源部门或相关负责人，以获取更准确的解答。
保持职业操守：无论是否需要回避，您都应保持职业操守，避免与同事（包括亲属）发生可能影响公正执行公务的行为。
如果您在劳动工伤领域还有其他问题或需要进一步的法律帮助，请随时向我咨询。