结论：是否需要承担责任，取决于具体的情况和弄掉谷物的行为性质。以下从不同角度进行分析：
故意或重大过失情况：
- 如果您是故意将别人晒在自己兄弟家门口的谷物弄掉，或者存在重大过失（例如，明知弄掉谷物会造成损失，却仍然实施该行为），那么您很可能需要承担侵权责任。根据《中华人民共和国民法典》的相关规定，行为人因过错侵害他人民事权益造成损害的，应当承担侵权责任。在这种情况下，您可能需要赔偿对方因此遭受的损失，包括谷物的价值、重新晾晒的费用等。
无过错或一般过失情况：
- 如果您弄掉谷物的行为并非出于故意或重大过失，而是由于一般过失或不可抗力等原因造成的，那么您可能不需要承担全部或部分责任。例如，如果您在行走时不小心碰到了谷物，导致其掉落，且这种情况并非您所能预见或避免的，那么您可能不需要承担赔偿责任。然而，如果您的行为虽然非故意，但存在一定的疏忽或不当，法院可能会根据具体情况判决您承担部分责任。
特殊情况考虑：
- 还需要考虑的是，如果晒谷物的行为本身存在违法性或不当性（例如，在公共通道上晒谷，妨碍了他人通行），那么对方可能也需要承担一定的责任。在这种情况下，法院可能会根据双方的过错程度，判决各自承担相应的责任。
法律建议：
- 在处理此类纠纷时，建议您首先尝试与对方进行协商，寻求和解或达成赔偿协议。这可以节省时间和成本，并避免不必要的法律纠纷。
- 如果协商无果，您可以考虑寻求法律援助或咨询专业律师，以了解您的权利和义务，并制定合适的应对策略。
- 在任何情况下，都请保持冷静和理性，避免采取过激或违法的行为来解决问题。
可能法律后果：
- 如果您被认定需要承担责任，那么您可能需要赔偿对方因此遭受的损失。这可能包括直接损失（如谷物的价值）和间接损失（如重新晾晒的费用、因谷物损坏导致的其他经济损失等）。
- 如果您的行为构成违法或犯罪（例如，故意毁坏财物罪），那么您还可能面临刑事处罚或行政处罚。
如果您有任何进一步的疑问或需要更具体的法律建议，请直接向我咨询。