可以举报，但能否成功追究其法律责任需结合具体情况分析。以下从不同角度为您详细解析：
一、从举报可行性角度分析
- 举报主体与对象：您作为知情人，有权向相关部门举报该退休人员的贪污行为。举报对象虽已退休，但若其在单位任职期间存在贪污行为，且该行为未超过法律规定的追诉时效，相关部门仍会依法进行调查。
- 证据要求：您提到的“他给我说的证词”可以作为举报的线索或初步证据。但仅凭口头证词可能不足以直接定罪，还需结合其他证据，如财务记录、交易凭证、证人证言等，形成完整的证据链。
二、从法律责任角度分析
- 贪污罪的构成：根据《中华人民共和国刑法》第三百八十二条，贪污罪是指国家工作人员利用职务上的便利，侵吞、窃取、骗取或者以其他手段非法占有公共财物的行为。若该退休人员在职时符合贪污罪的主体要件（如为国家工作人员），且存在上述行为，则可能构成贪污罪。
- 追诉时效：根据《中华人民共和国刑法》第八十七条，犯罪经过下列期限不再追诉：
- 法定最高刑为不满五年有期徒刑的，经过五年；
- 法定最高刑为五年以上不满十年有期徒刑的，经过十年；
- 法定最高刑为十年以上有期徒刑的，经过十五年；
- 法定最高刑为无期徒刑、死刑的，经过二十年。如果二十年以后认为必须追诉的，须报请最高人民检察院核准。
若该退休人员的贪污行为未超过上述追诉时效，且证据充分，则可能被追究刑事责任。
- 退休不影响刑事责任：退休并不免除其在职期间违法犯罪行为的刑事责任。若查实其存在贪污行为，即使已退休，仍可能面临刑事处罚。
三、从举报流程与建议角度分析
举报流程：
- 选择举报渠道：您可以向该单位所在的纪检监察部门、上级主管部门或当地检察机关举报。
- 提交举报材料：包括举报信、相关证据（如证词、财务记录等）及您的联系方式。
- 配合调查：在举报后，若相关部门认为有必要，可能会联系您进一步了解情况或提供补充证据。
建议：
- 确保证据真实可靠：在举报前，尽量收集并保存好相关证据，确保证据的真实性和完整性。
- 保护个人安全：在举报过程中，注意保护个人安全，避免因举报行为而遭受报复或威胁。
- 咨询专业律师：在举报前或举报过程中，若您对法律程序或证据要求有疑问，可以咨询专业律师以获取更具体的法律建议。
最后需要强调的是，举报贪污行为是公民的责任和义务，但举报需基于事实和证据。若您决定举报，请确保所提供的证据真实可靠，并配合相关部门的调查工作。如果您在此过程中有任何疑问或需要进一步的法律帮助，可以直接向我咨询。