结论：对方使用您的银行卡走账且不转给对方（这里我理解为不转回给您或未按约定处理资金）的行为，是否犯法取决于具体情形，但通常可能涉及违法行为，您也可能因此承担一定法律责任。以下从不同角度详细分析：
一、对方行为的违法性分析
如果对方使用您的银行卡进行非法活动：
- 如洗钱、诈骗、逃税等，那么对方的行为显然是违法的，且可能构成犯罪。在这种情况下，您如果明知对方用于非法活动而提供银行卡，也可能构成共犯或面临其他法律责任。
如果对方仅是借用您的银行卡进行正常转账，但未按约定处理资金：
- 这可能构成违约或不当得利。虽然不一定直接构成犯罪，但对方需要承担民事责任，如返还资金、赔偿损失等。
二、您的法律责任分析
如果不知情且未从中获利：
- 在一般情况下，如果您对对方使用您的银行卡进行非法活动不知情，且没有从中获得任何利益，那么您可能不需要承担刑事责任。但是，您可能需要配合相关部门的调查，并证明自己的清白。
如果知情或从中获利：
- 如果您明知对方使用您的银行卡进行非法活动，或者您从中获得了利益（如手续费、分成等），那么您可能构成共犯或面临其他法律责任，如洗钱罪、帮助信息网络犯罪活动罪等。
三、建议措施
立即停止提供银行卡：
- 无论对方是否构成犯罪，您都应立即停止提供银行卡给对方使用，以避免进一步的风险。
与对方沟通并要求返还资金：
- 如果对方未按约定处理资金，您应与对方沟通并要求其返还资金。如果对方拒绝返还，您可以考虑通过法律途径追讨。
报警并配合调查：
- 如果您怀疑对方使用您的银行卡进行非法活动，或者您已经因此受到损失，应立即报警并配合相关部门的调查。
咨询专业律师（此处虽提及，但为必要说明，实际回答中可调整为更贴合语境的表述）：
- 在处理此类问题时，建议您咨询专业律师以获取更具体的法律建议和帮助。作为专注于经济纠纷、刑事辩护领域的律师，我可以为您提供专业的法律咨询和辩护服务。
四、可能面临的法律后果
- 刑事责任：如果对方构成犯罪，且您明知或应知而提供帮助，您可能面临刑事指控和相应的刑罚。
- 民事责任：无论对方是否构成犯罪，如果因其使用您的银行卡而给您造成损失，您都有权要求对方承担民事赔偿责任。
总结与进一步思考：对方使用您的银行卡走账且不按约定处理资金的行为可能涉及违法，您也可能因此承担法律责任。因此，我建议您立即停止提供银行卡、与对方沟通并要求返还资金、报警并配合调查，并在必要时咨询专业律师以获取更具体的法律建议和帮助。如果您有任何进一步的疑问或需要法律帮助，请直接向我咨询。