结论：受害人主动跟被告人沟通，希望被告及时退赃，这一行为本身受害人并无罪。
分析说明：
受害人的行为性质：
- 受害人主动与被告人沟通，表达希望其及时退赃的意愿，这是受害人行使自己合法权益的一种表现。受害人有权要求犯罪嫌疑人或被告人赔偿因其犯罪行为所造成的损失，包括退还赃款赃物。
- 受害人的这一行为并不构成犯罪，因为它没有违反任何法律规定，也没有对他人或社会造成危害。
退赃的法律意义：
- 退赃是犯罪嫌疑人或被告人表明悔罪态度、减轻犯罪后果的一种重要方式。及时退赃可以体现犯罪嫌疑人或被告人的认罪、悔罪态度，有助于其在刑事诉讼中获得从轻或减轻处罚的机会。
- 对于受害人而言，退赃能够直接弥补其因犯罪行为所遭受的经济损失，是维护其合法权益的重要途径。
受害人与被告人的沟通：
- 受害人与被告人之间的沟通，特别是关于退赃的沟通，是刑事诉讼中常见的一种情况。这种沟通有助于促进双方的理解和和解，为刑事诉讼的顺利进行创造有利条件。
- 当然，在沟通过程中，受害人也应注意保护自己的合法权益，避免受到被告人的威胁或欺骗。如果受害人感到不安或担心自己的安全，可以及时向公安机关或法院寻求帮助。
特殊场景：
- 如果受害人在沟通过程中采取了非法手段，如威胁、恐吓或暴力等，来迫使被告人退赃，那么受害人的这一行为就可能构成犯罪，如敲诈勒索罪等。但这种情况与受害人主动沟通希望被告人退赃的初衷是截然不同的。
建议与行动：
- 对于受害人而言，如果希望被告人及时退赃，可以通过合法途径与被告人或其家属进行沟通，表达自己的意愿和诉求。
- 如果沟通无果或担心自己的安全，受害人可以及时向公安机关报案，由公安机关依法处理。
- 在整个过程中，受害人也可以咨询专业律师的意见，以更好地维护自己的合法权益。
后续法律后果：
- 如果被告人及时退赃并表现出真诚的悔罪态度，法院在量刑时可能会考虑这一因素，对其从轻或减轻处罚。
- 如果被告人拒绝退赃或逃避法律责任，法院将依法对其作出严厉的判决，并追缴其违法所得。
总之，受害人主动跟被告人沟通希望其及时退赃，这一行为本身并无罪。在沟通过程中，双方应遵守法律法规，以合法、和平的方式解决问题。如果有任何疑问或需要进一步的法律帮助，可以直接向我咨询。