结论：纪委通知你去谈话，通常意味着纪委在调查某个事项时，认为你与该事项存在某种关联，需要你配合调查说明情况。就你提到的“医生已经退款给纪委”这一信息，可能涉及医生存在违规行为并已退还相关款项，而纪委认为你作为生意人普通人与该事件有联系，所以通知你谈话。以下从多个角度为你详细分析：

纪委谈话的常见原因

1. 作为证人：纪委在调查医生违规行为的过程中，可能发现你与医生之间存在某些交易或往来，比如你可能曾经向医生提供过某些服务、商品，或者医生曾向你借款、有过其他经济往来等。纪委认为你了解相关情况，所以通知你作为证人去谈话，以获取更多关于医生违规行为的线索和证据。例如，医生可能存在收受回扣的行为，而你可能是提供回扣的一方或者知晓相关情况的人。
2. 涉及利益关联：如果医生退款给纪委是因为涉及与你的生意往来中的违规问题，比如医生在与你进行商业合作时，存在利用职务之便谋取私利，而你从中也获得了一定利益或者存在共同违规的嫌疑，纪委会通知你谈话，进一步调查你们之间的利益关系和违规事实。比如，医生利用自己的医疗资源为你推广产品，你给予医生高额回报，这种行为可能违反相关规定，纪委需要你配合说明情况。
3. 了解事件背景：有时候纪委调查的案件可能比较复杂，涉及多个方面和人员。即使你本身没有直接参与违规行为，但你可能了解一些与医生违规行为相关的背景信息，比如医生所在医院的运营模式、行业惯例等。纪委通知你谈话，是希望你能提供这些背景信息，帮助他们更全面地了解案件情况。

谈话时你需要注意的事项

1. 如实陈述：在纪委谈话过程中，你一定要如实陈述自己所知道的情况，不得隐瞒、歪曲事实或者提供虚假信息。因为提供虚假陈述可能会面临法律责任，包括被追究诬告陷害、伪证等罪名的风险。例如，如果你为了保护医生或者自己而故意隐瞒医生收受回扣的事实，一旦被查实，你将承担相应的法律后果。
2. 配合调查：要积极配合纪委的调查工作，按照纪委的要求提供相关的证据材料，如合同、转账记录、聊天记录等。这些证据材料可以帮助纪委更准确地了解案件情况，加快调查进度。如果纪委要求你提供与医生的交易合同，你应该及时提供，并确保合同的真实性和完整性。
3. 保护自身权益：在谈话过程中，如果你认为纪委的提问涉及到你的个人隐私或者商业秘密，你可以向纪委说明情况，要求他们在合法的范围内进行调查。同时，你也有权利要求纪委出示相关的调查手续和证件，确保调查的合法性。例如，纪委询问你与医生的私人财务往来情况，而这些情况与案件无关且涉及你的隐私，你可以拒绝回答或者要求纪委说明询问的必要性。

可能的法律后果

1. 如果涉及违规行为：如果经过纪委调查，发现你确实存在与医生共同违规的行为，比如参与行贿、受贿等，你将面临相应的法律制裁。根据违规行为的性质和情节轻重，可能会受到行政处罚，如罚款、没收违法所得等；情节严重的，可能会构成犯罪，被追究刑事责任，如行贿罪、受贿罪等。
2. 如果仅是证人：如果你只是作为证人配合纪委调查，且如实陈述了所知道的情况，没有参与任何违规行为，那么一般不会对你产生不利的法律后果。但是，如果你拒绝配合调查或者提供虚假证言，可能会面临被强制配合调查或者被追究法律责任的风险。

建议：在接到纪委谈话通知后，不要惊慌失措，要保持冷静。可以先回顾一下自己与医生之间的往来情况，整理好相关的证据材料。在谈话过程中，要认真听取纪委工作人员的提问，如实、清晰地回答。如果你对谈话内容或者纪委的调查程序有任何疑问，可以及时向纪委工作人员提出。如果有其他法律问题，也可以直接向我咨询。