结论：您给对方100万现金，对方不缴税，一般情况下与您没有直接的法律关系，但特定情形下您可能需要承担一定的法律责任。以下从不同角度为您详细分析：

1. 一般情形下的法律关系：

   • 税务责任主体：根据税收法律法规，纳税义务通常由取得收入的一方（即对方）承担。因此，在您给对方100万现金的交易中，如果对方是收入的取得者，那么对方有义务依法缴纳相关税款。
   • 您的法律地位：作为支付现金的一方，您通常不直接承担对方的税务责任。除非您与对方之间存在特定的法律关系（如合伙、共同投资等），且该法律关系要求您对对方的税务负责，否则您无需为对方不缴税的行为承担责任。

2. 特定情形下的法律责任：

   • 协助逃税：如果您明知对方不缴税或故意协助对方逃税，如提供虚假资料、隐瞒收入等，那么您可能构成协助逃税的行为。根据税收法律法规，协助逃税是违法的，您可能需要承担相应的法律责任，包括罚款、滞纳金等，甚至可能面临刑事处罚。
   • 代扣代缴义务：在某些特定情况下，如您作为支付方有代扣代缴税款的义务（如支付劳务报酬时），而您未履行该义务，那么您可能需要为未代扣代缴的税款承担责任。但这种情况通常适用于特定的支付场景和税种，且需要明确的法律规定或合同约定。

3. 法律建议：

   • 了解税务规定：在支付大额现金前，建议您了解相关的税务规定，确保交易合法合规。如果对方是收入的取得者，应提醒对方依法缴纳税款。
   • 保留交易证据：为了降低法律风险，建议您保留与交易相关的所有证据，如转账记录、收据、合同等。这些证据可以在发生纠纷时作为证明您交易合法性的依据。
   • 咨询专业律师：如果您对税务问题存在疑虑或不确定如何处理，建议咨询专业律师。我可以根据您的具体情况提供针对性的法律建议，帮助您规避法律风险。

可能后果：如果对方不缴税且您未履行相关义务或存在协助逃税行为，您可能面临税务机关的处罚，包括罚款、滞纳金等。在严重情况下，您甚至可能面临刑事处罚。因此，建议您谨慎处理此类交易，确保合法合规。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。