结论：
- 土地权属未发生合法变更的，您有权要求返还土地并恢复原状；
- 若存在权属争议或对方主张合法权利，需结合证据和诉讼时效综合判断；
- 若对方行为构成侵权，您可主张赔偿损失。
具体分析：
一、土地权属是核心前提
根据《中华人民共和国土地管理法》第二条、第十二条，土地所有权和使用权受法律保护，任何单位和个人不得侵占。若您能证明土地使用权归属您（如持有土地承包经营权证、宅基地使用权证等），则对方强占行为违法，您有权要求返还土地并恢复原状（如拆除猪圈）。
关键证据：土地权属证书、村委会证明、历史使用记录（如纳税凭证、相邻地界协议）等。
二、诉讼时效可能影响权利主张
根据《民法典》第一百八十八条，向人民法院请求保护民事权利的诉讼时效期间为三年，自权利人知道或应当知道权利受损之日起计算。但需注意：
- 若对方持续侵权（如猪圈一直存在并使用），诉讼时效可能未起算，您仍可主张权利；
- 若您曾明确提出异议（如协商、报警、信访等），诉讼时效可能中断并重新计算；
- 若土地被侵占超过20年，对方可能主张“取得时效”（但我国法律未明确规定取得时效制度，实践中需结合具体证据判断）。
建议：立即收集对方侵占的证据（如照片、视频、证人证言），并尽快通过法律途径主张权利，避免时效问题。
三、对方可能提出的抗辩及应对
主张“历史形成”或“村集体安排”：
- 若对方无法提供合法依据（如书面协议、村集体决议），其抗辩不成立；
- 若涉及村集体行为，需核查是否经过法定程序（如村民会议表决）。
主张“善意取得”：
- 善意取得需满足“善意、有偿、已登记”等条件，强占土地显然不符合，无需担心。
主张“已超过诉讼时效”：
- 如前所述，持续侵权或您曾主张权利的，诉讼时效可能未过期。
四、行动建议
- 协商解决：先与对方沟通，要求其自行拆除猪圈并返还土地，保留沟通记录（如录音、书面协议）；
- 行政投诉：向当地自然资源局（原国土局）或农业农村局举报，要求行政机关查处非法占地行为；
- 民事诉讼：若协商和行政途径无效，可向法院起诉，主张返还土地、恢复原状并赔偿损失（如土地收益损失）。
提示：土地纠纷涉及权属证明、历史政策、地方实践等多重因素，建议尽快委托律师介入，制定针对性方案。如有进一步问题，可直接向我咨询。