结论：您拔掉并扔掉别人家种的大麻的行为，可能涉及民事侵权、行政处罚甚至刑事责任，具体取决于多种因素。以下是对此问题的详细分析：
一、民事侵权行为
一般情况：大麻作为非法种植的植物，本身不受法律保护。然而，您未经允许拔掉并扔掉他人种植的大麻，可能侵犯了他人对种植地点的使用权或管理权（尽管这种权利本身可能因非法种植而受限）。如果种植者能证明其因您的行为遭受了实际损失（如种植成本、预期收益等），您可能需要承担一定的民事赔偿责任。但需注意，由于大麻种植的非法性，这种赔偿请求可能难以得到法律支持，尤其是在种植者无法证明其合法种植权益的情况下。
特殊情况：如果种植者能够证明其种植大麻的行为是出于某种特殊原因（如误种、不知情等），且您拔掉大麻的行为造成了其不必要的损失，那么您可能需要承担一定的赔偿责任。但这种情况较为罕见，且需具体证据支持。
二、行政处罚
非法种植大麻的处罚：根据《中华人民共和国治安管理处罚法》及相关法律法规，非法种植大麻是违法行为，种植者可能面临行政处罚，如罚款、拘留等。然而，这并不直接涉及您的行为。
您行为的处罚可能性：虽然您拔掉大麻的行为可能出于好意，但如果您在拔掉过程中损坏了其他合法财物（如菜地设施、周边植物等），或者您的行为被认定为故意破坏他人财物，那么您可能面临行政处罚，如罚款、拘留等。此外，如果您在拔掉大麻时被误认为是种植者或同伙，也可能面临不必要的麻烦。
三、刑事责任
故意毁坏财物罪：如果您的行为被认定为故意毁坏他人财物，且毁坏的财物价值达到当地规定的故意毁坏财物罪的立案标准（一般不低于5000元，具体标准因地区而异），那么您可能构成故意毁坏财物罪，面临刑事处罚。但需注意，由于大麻种植的非法性，这种认定可能较为复杂，且需具体证据支持。
其他刑事责任：在极少数情况下，如果您的行为被认定为与种植大麻的犯罪活动有关（如共同犯罪、帮助犯罪等），那么您可能面临更严重的刑事责任。但这种情况需要您有明确的犯罪故意和与种植者的共谋行为。
四、建议与注意事项
避免直接接触：如果您发现他人非法种植大麻，建议避免直接接触或处理，以免引发不必要的法律纠纷。
及时报警：您应该立即向当地公安机关报案，由专业人员进行处理。这样既能确保大麻被依法处理，也能保护您自身的合法权益。
保留证据：如果您在拔掉大麻前已经报警或采取了其他合法措施，建议保留相关证据（如报警记录、照片、视频等），以证明您的行为是出于合法目的。
咨询专业律师：如果您对此事有任何疑问或担忧，建议咨询专业律师以获取更具体的法律建议。作为张正强律师，我擅长处理侵权纠纷、债权债务、公司事务、合同纠纷等领域的问题，您可以随时向我咨询。
总之，您拔掉并扔掉别人家种的大麻的行为可能涉及多种法律后果。为了避免不必要的麻烦和法律风险，建议您采取合法、谨慎的方式处理此类问题。