首先，如果承包地旁边的违法建筑确实影响到了庄稼的生长，您有权采取一系列措施来维护自己的合法权益。
结论前置：您可以先尝试与违法建筑的所有者或使用者进行协商，要求其拆除或整改建筑，以消除对庄稼生长的影响。如果协商无果，您可以向当地的土地管理部门或城乡规划部门举报该违法建筑，并要求其依法进行处理。同时，您也可以考虑通过法律途径维护自己的权益，比如提起民事诉讼，要求违法建筑的所有者或使用者赔偿因建筑影响庄稼生长而造成的损失。
具体分析：
协商解决：
- 在发现违法建筑影响庄稼生长后，首先可以尝试与违法建筑的所有者或使用者进行友好协商，说明情况并提出合理的整改要求。
- 如果对方愿意配合，那么问题可能得以较快解决。
向相关部门举报：
- 如果协商无果，您可以向当地的土地管理部门或城乡规划部门举报该违法建筑。
- 这些部门有责任对违法建筑进行调查和处理，包括责令拆除、罚款等。
- 举报时，请提供尽可能详细的证据，如照片、视频、证人证言等，以支持您的主张。
法律途径维权：
- 如果前两种方式均无法解决问题，您可以考虑通过法律途径来维护自己的权益。
- 您可以提起民事诉讼，要求违法建筑的所有者或使用者赔偿因建筑影响庄稼生长而造成的经济损失。
- 在诉讼过程中，您需要提供充分的证据证明违法建筑对庄稼生长的影响以及因此造成的具体损失。
法律建议：
- 在采取任何行动之前，请确保您已经充分了解了相关法律法规和程序要求。
- 如果可能的话，咨询当地的法律专业人士或律师以获取更具体的法律建议和支持。
- 保留好所有与问题相关的证据和文件，以便在需要时提供证明。
希望这些建议能对您有所帮助。如果您有任何其他问题或需要进一步的法律支持，请随时向我咨询。