结论：他人给人民币你给港币这一行为本身并不直接违法，但具体是否违法需结合交易背景、目的及是否违反外汇管理规定等因素综合判断。以下从不同角度为你详细分析：
一、一般交易场景下的合法性
个人日常兑换：
- 如果是在个人之间，出于日常消费、旅游等合理需求，进行小额的人民币与港币兑换，且没有涉及非法买卖外汇或洗钱等违法行为，那么这种兑换行为通常是合法的。
- 例如，你朋友要去香港旅游，需要一些港币，而你手头有港币，他给你人民币作为交换，这种行为在合理范围内是合法的。
合法金融机构兑换：
- 如果你通过银行或其他合法金融机构进行人民币与港币的兑换，那么这种行为肯定是合法的。
- 金融机构会按照国家外汇管理规定进行兑换，并确保交易的合规性。
二、可能违法的场景
非法买卖外汇：
- 如果你在没有取得外汇经营资质的情况下，以营利为目的，频繁进行人民币与港币的大额兑换，那么可能构成非法买卖外汇行为。
- 根据《中华人民共和国外汇管理条例》及相关规定，非法买卖外汇会受到行政处罚，情节严重的还可能构成犯罪，如非法经营罪。
洗钱行为：
- 如果兑换行为背后隐藏着洗钱的目的，即通过兑换来掩盖非法所得的来源和性质，那么这种行为肯定是违法的。
- 洗钱行为不仅违反了外汇管理规定，还触犯了刑法中的洗钱罪。
违反外汇管理规定的其他行为：
- 除了非法买卖外汇和洗钱外，如果兑换行为违反了国家外汇管理的其他规定，如未经批准擅自将外汇存入境外、擅自将外汇携带出境等，也可能构成违法行为。
三、法律建议
了解外汇管理规定：
- 在进行人民币与港币的兑换前，建议先了解国家外汇管理的相关规定，确保自己的兑换行为合法合规。
选择合法渠道兑换：
- 为了避免违法风险，建议通过银行或其他合法金融机构进行兑换。这些机构有完善的监管机制和合规流程，能够确保交易的合法性和安全性。
保留交易凭证：
- 在进行兑换时，建议保留好交易凭证，如银行转账记录、兑换收据等。这些凭证在后续可能出现的法律纠纷中可以作为证据使用。
咨询专业律师：
- 如果你对兑换行为的合法性存在疑问，或者担心可能涉及法律风险，建议咨询专业律师。律师可以根据你的具体情况提供法律意见和风险提示。
最后，虽然他人给人民币你给港币这一行为本身并不直接违法，但具体是否违法需结合交易背景、目的及是否违反外汇管理规定等因素综合判断。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。