结论：买的草药退给商家时，建议签订书面协议，以明确双方的权利义务，避免后续纠纷。以下从不同角度进行分析：

一、签订协议的必要性

1. 明确退货原因与责任：协议中可以详细记录退货的原因，如草药质量问题、规格不符、数量错误等，以及双方对此的责任划分。这有助于在后续出现争议时，提供明确的证据支持。

2. 规定退货流程与期限：协议可以约定退货的具体流程，如退货的接收方式、退货后的检验流程等，以及退货的期限。这有助于确保退货过程的顺利进行，避免因流程不清或期限不明而产生的纠纷。

3. 约定退款方式与时间：协议中可以明确退款的方式（如现金、转账等）和时间，确保买家在退货后能够及时收到退款，维护买家的合法权益。

二、不签订协议的风险

1. 证据缺失风险：如果没有签订书面协议，一旦发生纠纷，双方可能因缺乏明确的证据而难以证明各自的主张，导致纠纷难以解决。

2. 责任不清风险：没有协议明确责任划分，双方可能对退货的原因、责任等产生争议，进而引发法律纠纷。

3. 退款困难风险：没有协议约定退款方式和时间，买家可能面临退款困难的问题，如商家拖延退款、拒绝退款等。

三、协议内容建议

在签订退货协议时，建议包含以下内容：

1. 双方信息：明确买家和商家的名称、联系方式等基本信息。

2. 退货原因与责任：详细记录退货的原因，并明确双方对此的责任划分。

3. 退货流程与期限：约定退货的具体流程、接收方式、检验流程以及退货的期限。

4. 退款方式与时间：明确退款的方式（如现金、转账等）和时间，确保买家能够及时收到退款。

5. 违约责任：约定如果一方违反协议约定，应承担的违约责任，以约束双方的行为。

四、特殊情况处理

1. 如果商家拒绝签订协议：买家可以要求商家在退货时出具书面收据或确认函，以证明退货的事实和双方的责任划分。同时，买家可以保留好退货的相关证据，如退货的物流单据、照片等，以备不时之需。

2. 如果退货过程中出现争议：双方可以首先尝试通过协商解决争议。如果协商不成，买家可以向消费者协会或相关监管部门投诉，或者通过法律途径解决纠纷。

建议：在退货时尽量与商家签订书面协议，以明确双方的权利义务，避免后续纠纷。如果商家拒绝签订协议或退货过程中出现争议，买家应保留好相关证据，并寻求法律帮助。如有任何疑问或需要进一步的法律建议，请直接向我咨询。